Loading presentation...

Present Remotely

Send the link below via email or IM

Copy

Present to your audience

Start remote presentation

  • Invited audience members will follow you as you navigate and present
  • People invited to a presentation do not need a Prezi account
  • This link expires 10 minutes after you close the presentation
  • A maximum of 30 users can follow your presentation
  • Learn more about this feature in our knowledge base article

Do you really want to delete this prezi?

Neither you, nor the coeditors you shared it with will be able to recover it again.

DeleteCancel

Make your likes visible on Facebook?

Connect your Facebook account to Prezi and let your likes appear on your timeline.
You can change this under Settings & Account at any time.

No, thanks

12장 문항 제작유형 및 분석

교육과정 및 교육평가
by

Jinhan Jun

on 11 July 2011

Comments (0)

Please log in to add your comment.

Report abuse

Transcript of 12장 문항 제작유형 및 분석

12장 문항 제작유형 및 분석 20061131 전진한 일반적으로 인간의 잠재능력에 대한 평가는 검사에 의하여 실시되고 있다.
좋은 검사가 되기 위해서는 검사의 기본 단위인 문항이 잘 구성되어야 한다. 좋은 문항이 갖추어야 할 일반적인 조건, 다양한 문항 유형 및 제작 원리, 장단점,
그리고 문항을 분석하는 과정을 다루고자 한다. 좋은 문항의 조건 1) 문항제작자는 교육과정을 충분히 이해하고 있어야 한다.
학습자가 무엇을 알고 있는지, 무엇을 더 알아야하는지를 잘 파악하여아한다. 2) 피험자 집단의 심리적, 교육학적 특성을 잘 알고 있어야 한다.
학습자의 발달수준뿐 아니라 사용하는 어휘수준까지 파악하여야 적합한
문항을 만들 수 있다. 3) 자신의 생각을 정확하고 분명하게 표현할 수 있는 문장력을 갖추어야 한다.
내용을 간결하고 정확하게 표한할 수 있어야 목표달성도 제대로 할 수 있다. 4) 문항의 좋고 나쁨을 평가하기 위해 검사이론에 관해 해박한 지식을 지니고
있어야 한다.
문항들의 집합체인 검사의 타당도 및 신뢰도를 검증할 수 있어야 한다. Gronlund(1988)
좋은 문항제작의 장애요인은 필요 이상의 어려운 단어, 불필요하게 복잡한 문장구조, 모호한 문장, 너저분하게 기술된 문장, 불분명한 그림, 혼돈스러운 지시문 등이 있다. 이런 면에서 새로운 문항을 제작하는일은 고도의 기술과 특별한 능력이 요구되는 창의적 활동이다. 문항제작에 가장 필수적인 요소는 교육목표에 대한 깊은 이해와 교수목표 혹은 학습과제를 문항의 형식으로 변역해 내는 기술, 지식, 경험이라고 할 수 있다. 좋은 문항을 만들기 위하여 고려할 점들 1) 문항 내용의 적절성 고려.
적절성이란 문항의 내용이 측정하고자 하는 내용을 얼마나 잘 측정하고
있는가를 의미한다. 따라서 문항들이 측정하고자 하는 내용을 제대로 담
고 있을 때 그 검사는 타당도가 높다고 할 수 있다. 2) 문항 내용의 복합성 고려.
복합성이란 개인이 부딪는 요소 혹은 관계의 폭과 관련되는 문항의 특징
을 말한다. 문항이 복합적이야 한다는 것은 단순한 기억에 의한 사실보다
분석, 종합, 평가등의 고등정신능력을 측정할 수 있는 문항이어야 한다. 3) 문항 내용의 일정한 추상성.
질문의 내용이 단순사실을 열거하여 단편의 지식을 평가하는것 보다
구체적으로 열거된 사실을 요약하고 일반화 및 추상화 시킬수 있어야 한다. 4) 문항의 참신성 고려.
이미 존재하는 진부한 형태의 문항이 아닌 새로운 형태를 의미한다. 문항의
내용이 참신할 때 새로운 정신능력을 측정할 가능성도 커지게 된다. 5) 문항의 구조화.
이는 문항의 체계성이라는 말과 유사하며, 문항의 질문이 모호하지 않고
구체적이어야한다. 대체적으로 객관식 문항이나 선택형 문항은 서답형
문항이나 논문형 문항보다 구조화 되어 있다. 6) 문항의 적절한 난이도.
피험자의 능력보다 지나치게 어렵거나 쉬운 문항은 교수목표를 측정하는데
적절치 않다. 7) 문항은 학습동기를 유발시켜야 한다.
피험자의 반응결과(성공또는실패)가 학업성적뿐아니라 학습동기,흥미,태도,
자아개념등 정의적 행동 형성에 중요한 영향을 미친다는 사실에 근거한다. 문항 유형 문항의 유형은 채점방법에 따라 객관형과 주관형,
피험자의 반응방식에 따라 선택형과 서답형으로 구분된다. 선택형문항 : 주어진 답지 중 하나를 고르는 문항 형태 (객관식문항) 서답형문항 : 피험자가 정답을 직접 써넣는 형태의 문항 (주관식문항) 선택형 문항 (1) 진위형
객관식, 고정반응형. 양자택일형이라고도 한다.
제시된 진술문에 대해 옳고 그름을 판단하는 형태이다.
변형모형으로 예/아니요, 찬성/반대가 있다. 진위형 문항 제작시 유의사항 1. 질문에는 중요한 내용이 포함되어야 한다. 중요하지 않은 내용 때문에 문항의 정답을 알고 있어도 중요하지 않는 내용 때문에 오답의 가능성이 있기 때문이다.

2. 한 개의 문항은 하나의 내용만을 포함하도록 한다. 하나의 문항에 많은 내용이 포함될 경우 측정에 어려움이 있기 때문이다.

3. 부정문의 사용은 가능한 줄이고 이중부정은 피해야 한다. 부정어의 사용이 피험자를 혼란에 빠지게 하여 실수를 유발하기 때문에 최대한 사용을 줄이고, 부득이 사용하게 된다면 밑줄을 긋는게 바람직하다.

4. 가능한 한 단순한 문장으로 간단명료하게 질문하다. 조건이 많이 붙은 긴 문장은 한쪽이 옳고 그를 가능성이 있으며 질문의 내용을 불명확하게 한다.

5. 답의 단서가 될 수 있는 절대적 어구나 일반적 어구는 사용하지 않는다. 절대, 항상, 반드시, 결코등의 절대적어구는 오답의 단서가 될 수 있고, 때때로, 대체로 등의 일반적어구는 정답을 암시할수 있기 때문이다. 진위형 문항의 장점 진위형 문항의 단점 1. 문항제작이 쉽기 때문에 짧은 시간 내 많은양의 문항 출제가 가능하여 한 검사에
많은 학습목표를 포함시킬 수 있다.
2. 채점이 빠르고 신뢰가 가며 객관적이다.
3. 읽기능력이나 언어능력이 부족한 피험자들에게 적합하다 (ex)초등학교 저학년) 1. 추측에 의한 정답확률이 크므로 (50%확률) 우연을 통제하기 어렵다. 따라서 진위형으로만 구성된
검사의 신뢰도는 낮다.
2. 고등정신능력보다는 중요치 않은 교수목표나 단순한 기억력을 요구, 측정할 가능성이 높다.
3. 학습자의 학습동기를 감퇴시킬 우려가 있다. 진위형 평가는 특별 공부하지 않아도 된다는 인식을
가지게 하고 극 피상적인 학습을 유도할 수 있기 때문이다 (2) 선다형
선택형 문항유형 중 가장 많이 쓰이는 형태로 두 개 이상의 답지를 주고 그중에 맞는 답지나 가장 알맞은 답지를 선택하는 문항. 선다형은 문두와 그에 따른 두 개이상의 답지로 구성되는데, 문두는 의문문이거나 불완전 문장으로 구성된다. 일반적으로 선다형 문항은 여러개의 답지 중 옳은것을 고르는 정답형 문항과 답지중 가장 맞는 답을 선택하는
최선답형으로 분류된다. 선다형 문항 제작시 유의사항 1. 문두는 간결하고 단순하게 서술하여 질문의 내용이 모호하지 않아야 한다. 간단하고 명확하게 문두를 제시함으로써 무엇을 묻는지 명확하게 드러나야 한다.

2. 정답은 분명하고 오답은 매력적으로 만들어져야한다. 정답은 분명해야하고 오답은 그럴듯하고 정답인듯하게 만들어져야한다. 정확한 지식을 가지고 있지 않는 피험자에게 혼동이 생기도록 답지를 제작하여아한다.

3. 정답을 고르거나 오답을 제거할수 있는 단서를 주지말아야한다. 질문 내용에서 정답에 대한 단서를 찾았다면 피험자의 능력을 변별할수 없는 쓸모없는 답지가 된다.

4. 답지의 형태나 길이는 서로 비슷해야하며 다를경우엔 짧은 답지부터 배열하여야 한다. 대체로 정답의 길이는 길거나 자세하기 때문에 제작시에 오답도 정답만큼 길고 자세하게 의도적으로 진술하여야한다.

5. 정답의 번호가 특정번호에 치우치지않도록하여야 하며 정답의 위치도 다양하여야한다. 선다형은 4-5개의 답지로 구성되는데 정답이 놓이는 순서로 추측하거나 특정한번호에 몰리지 않도록 정답의 배치에 어떠한 규칙성도 드러나지 않도록 주의하여야 한다. 선다형 문항의 장점 선다형 문항의 단점 1. 다양성 및 포괄성. 학습내용의 많은영역을 측정할 수 있으며 여러 가지 문제 상태,목적,내용을 다양하게 다룰 수 있다.
2. 주어진 시간내에 많은 문항의 검사를 실시할 수 있고, 넓은 영역의 학업성취 수준을 측정할 수 있기 때문에 검사내용의 타당도를 증진시킨다.
3. 채점이 용이하고 객관적이고 기계적으로 할수 있어 채점의 신뢰도가 높다. 1. 창의성, 분석력 ,문제해결능력 등 고등정신능력을 측정하기 어렵다.
2. 그럴듯 하고 매력적인 오답을 제작하기 어렵다.
3. 좋은 문항을 제작하는 데 많은 시간이 소요된다. 따라서 좋은 문항을 만들기 위해서 상당한 경험과 문항제작의 관한 지식이 필요하다.
4. 추측에 의한 정답을 맞 확률을 완전 배제할 수 없다. (3) 연결형
연결형 문항은 일련의 전제와 일련의 답지를 배열하여 전제에 대한 질문의 정답을 답지에서 찾아 연결하는 형태. 배합형이라고도 한다. 가장 많은 유형은 전제와 답지가 한 묶음으로 되어있는 단순 연결형이다. 연결형 문항 제작시 유의사항 1. 전제나 답지는 고도의 동질성을 가진 것끼리 제시한다. 동질성이 결여되면 피험자에게 정답의 단서를 주게 될 가능성이 커진다.

2. 전제보다 답지의 수가 많아야 한다. 전제의 문제 수보다 답지수를 많게 하는 이유는 마지막으로 남은 답지가 자연적으로 정답이 되는 경우를 방지하기 위함이다.

3. 전제와 답지의 각 문항은 최대한 계열성 있게 배열한다. 항목들 간에 논리적 순서나 시간적,공간적 계열성이 있다면 그에 따라 배열하는것이 좋다.

4. 전제나 답지수를 적절 제한하여야 한다 이상적인 전제와 답지수는 전제는 5개, 답지는 7-8개 적당하다. 전제나 답지수가 너무 많으면 피험자가 혼란되고 싫증을 내게 되며 동질성을 유지하기 어렵게 된다. 연결형 문항의 장점 연결형 문항의 단점 1. 문항제작이 비교적 간편하고 다룰 수 있는내용이 포괄적이라 유사한 사실을 비교 분석하고 판단하는 고등정신능력을 평가하기 용이하다.
2. 채점을 신뢰할수 있고 객관적이기 때문에 검사의 객관도 및 신뢰도를 높힐수 있다. 1. 좋은 문항을 만드는데 많은 노력과 시간이 소요 된다.
2. 정교하게 만들지 못하면 진위형처럼 단순한 사실의 기억을 측정하는데에 그친다.
3. 연결이 진행되면서 점차 연결수가 줄어듦으로써 추측요인이 작용할 가능성이 있다. 서답형 문항 (1) 단답형
간단한 언어, 어구, 수, 기호 등을 제한된 형태로 써넣는 문항 형식으로 용어의 정의나 의미를 측정할 때 자주 사용된다. 단답형 문항 제작시 유의사항 1. 간단한 형태의 답이 나올 수 있도록 문항을 제작한다. 정확한 용어를 사용, 질문의 내용이 명료해야 비로소 여러개의 정답이 나올 가능성이 줄어들어 간략한 답이 제시된다.

2. 정답수는 될수 있는데로 한 개 혹은 몇 개가 되도록 한정해야한다. 단답형에선 가능한 정답이 한 개인 것이 바람직하다.

3. 수치나 계산 문제에 관련된 문제에서는 기대하는 정확성의 정도 혹은 계산 절차의 수준을 명시해야한다. 계산문제같은 경우 지시를 엄격하게 하여 피험자가 질문을 명료하게 이해할수 있게하여 문항 해결에 소요되는 시간을 줄인다. 단답형 문항의 장점 단답형 문항의 단점 1. 문항제작이 용이하고 넓은 영역의 내용측정이 가능하기 때문에 짧은시간내 광범위하게 검사하는데 유용하며 추측요인에 의하여 정답을 맞출확률이 가능한 낮아진다. 1. 짧은 답을 요구하는 문항의 특성상 단순 지식,개념,사실만 평가할 가능성이 높아 기억력에 의존하는 학습을 조장할수 있으며 채점시 객관성을 확보하기 어렵다. (2) 완성형
진술문의 내용 가운데 한 부분을 비워 놓고 그 부분에 들어가야 할 적합한 단어나 부호를 적어 넣도록 하는 유형이다. 완성형 문항 제작시 유의사항 1. 중요한 내용을 여백으로 두고 여백의 수를 적절 제한한다. 의미가 있고 중요하다고 생각되는 부분만 비워놓음으로써 피험자가 중요한 내용을 인지하고 있는지 확인할 수 있어야 한다. 이상적인 여백수는 내용과 길이에 따라 다르지만 3-4개가 적당하다.

2. 정답이 짧은 단어나 기호로 응답되도록 질문한다. 완성형 문항은 문장의 중간이나 끝에 여백을 두어 질문하는 유형이기 때문에 가능한 짧은 단어로 응답할 수 있게 한다.

3. 진술문 가운데 답을 암시하는 내용이 없어야 한다. 중간 여백을 두어 질문을 할 때 조사(을/를, 이/가)에 유의하여 여백 뒤에 가능한 조사를 모두 사용하는것이 바람직하다.

4. 여백은 질문 후미에 두는 것이 바람직하다. 여백이 질문안에 있으면 문장이 읽기 어렵고 응답하는데 많은 시간이 소요되므로 가능한 한 여백을 질문 뒤에 두어야한다.

5. 채점 시 여백하나를 채점 단위로 한다. 채점의 정확성과 체계성을 위함이다. 여러 개의 여백을 묶어서 점수를 부여하게 되면 여백을 하나씩 채점할 때 보다는 채점의 일관성이 결여되기 때문이다. 완성형 문항의 장점 1. 선택형문항에서 처럼 단서가 없으므로 추측요인을 배제할 수 있으며 문항제작이 선다형 문항에 비해 비교적 수월하기하다.
2. 채점이 비교적 용이하고 채점의 객관성을 유지할 수 있다. 완성형 문항의 단점 1. 단순한 지식, 개념, 사실 등을 측정할 가능성이 높다. (3) 논술형
주어진 질문에 제한 없이 여러개의 문장으로 응답하는 형태로서 이론적으론 피험자의 반응을 거의 무한하게 허용하는 자유 반응 유형이다. 일정한 형식이 없고 질문이나 지시에 따라 자유롭게 피험자가 능력을 발휘하므로 분석력,비판력,조직력,종합력,문제해결력 등의 고등정신능력을 측정할 수 있다.
논술형에서 허용되는 피험자의 반응은 반응범위에 제한여부에 따라 제한반응형과 확대반응형으로 나눌 수 있다. 제한반응형은 논술의 범위를 지시문에서 축소하거나 글자수를 제한하는 반면, 확대반응형은 글자수 및 지시문에 의한 서술범위도 제한하지 않는다. 논술형 문항 제작시 유의사항 1. 피험자 집단의 특성을 고려해야 한다. 논술형에선 반응의 자유를 최대한 허용하므로 피험자들이 어떤 성질을 지닌 집단인지를 분명하게 파악하지 못하면 질문에 대한 반응이 지나치게 다양해지기 쉽다.

2. 질문의 요지가 분명하고 구조화되어야한다. 질문을 구조화하여 원하는 답이 제시 되어야 과제가 분명 제시되고 채점도 용이하다.

3. 문항은 난이도 순으로 배열해야 한다. 검사내 문항을 배열할 때 쉬운 문항에서 어려운 문항의 순서로 배열한다. 피험자에 있어 논술형은 중압감을 주므로 피험자가 어려운 문항을 먼저 대하면 검사불안이 높아져 쉬운문항도 틀리는 경우가 있다.

4. 문항 점수를 제시한다. 문항점수를 검사지에 제시하므로 피험자는 문항의 점수를 고려하여 어떻게 응답하는게 유리한지 전략을 세울수 있다.

5. 채점기준을 미리 마련해야 한다. 동일한 답안지라도 채점자마다 다른점수를 부여할 가능성이 크기 때문에 구체적인 채점기준이 필요하다. 채점기준은 가능한 모든답안을 열거하여 해당부분에 몇점을 줄것인가 까지 결정하여야 한다. 논술형 문항의 장점

1. 피험자의 모든 정신능력을 측정하는데 적절하다. 전체적인 관련 속에서 전후가 논리성 있게 표현되는지를 평가할 수 있다.
또한 분석력,조직력,문제해결력,작문능력 등 다양한 고등정신능력을 측정할 수 있으며 선다형이나 단답형에 비해 상대적으로 문항을 제작하기가 쉽다. 논술형 문항의 단점

1. 검사내 출제 문항수가 제한되기 때문에 교과영역을 광범위하게 측정하기 어렵다
2. 문장력이 작용하여 채점에 영향을 줄수있다. 답안의 내용과 관계없이 문장력이 뛰어난 답안은 상대적으로 유리할 가능성이 높다.
3. 채점하는데 노력과 시간이 많이 든다.
4. 일관성에 문제가 있다. 논술형 문항의 가장 심각한 단점으로 하나의 답안을 여러사람이 채점할 경우 각각의 점수가 달라질 가능성이 크므로 채점자의 신뢰도가 결여된다. 연구문제 주관식문항과 객관식 문항제작에서
특별히하게 유의해야 할 점으로
어떤 것이 있는지 살펴보자.
Full transcript