제 5 장2. 컴퓨터화 검사

20130180미술교육과 김은혜

기술 산업 발달 개인의 삶정보

업무처리 커뮤니티

교육

2.1 컴퓨터화 검사

교육

부재율 (2002)

컴퓨터를 이용한 검사 시도

평가의타당성

표준화를통한

신뢰도 증가

검사시행의편리성

새로운정보

2.1 컴퓨터화 검사

2.2 컴퓨터화 검사의 발달

컴퓨터 보조검사

컴퓨터 이용검사

컴퓨터 개별적응검사

• 지필검사의 보조역할• 채점과 결과 통보 시 필요한

인력 , 시간 , 경비 절감• 결과의 저장 , 관리 용이

• 컴퓨터를 통한 직접 검사• 연필과 종이 대체• 컴퓨터 자료를 이용한 새로운

유형의 문항 등장• 측정하지 못하였던 피험자의

능력 측정 가능

• 지필검사의 보조역할• 개별 피험자의 능력이나 특정

수준에 적합한 문항 선별

2.2 컴퓨터화 검사의 발달

Bunderson, In-ouye, & Olsen

지속적 측정

지능적 측정

수업활동 = 수업 중 개인의 능력 변화 과정 측정 , 관리

한 학습자의 성장과정이 수시로 평가되며 , 프로파일로 저장된다 . 그에 근거하여 후속적 학습이나 수업 진행된다 .

지식 기반과 추론 엔진의 충분한 발달 필요

개인의 성장 과정과 학습 프로파일에 근거하여 그에 적응적이고 지적인 교수학습 안내

2.2 컴퓨터화 검사의 발달

웹기반 검사웹기반 평가

• 웹을 기반으로 한 컴퓨터 검사 - 전세계와 연결

• 프로그램의 수정 용이• 원활한 의사소통 가능• 보조도구의 발전

시험감독 X→ 본인확인 어려움

컴퓨터나 네트워크의 성능이 변수로 작용할 가능성

2.3 컴퓨터이용검사

전반적인검사의 틀

변화

검사를 통해얻는 정보

변화

단순한매체의 변화

X

컴퓨터이용검사연필과 시험지를 이용한 초기의 지필검사에서 컴퓨터를 이용한 검사 형태로의 변화

2.3 컴퓨터이용검사

• 다양한 형태의 자료를 문항에 포함 - 기존 검사에서 측정하기 어려웠던 능력을 측정 가능

• 문항과 피험자 대한 다양한 정보 제공

• 검사 시행의 편리

• 장기적인 경제적 이득

• 지필검사와의 동등성이 완전히 검증되지 못함

• 컴퓨터 조작 능력이 결과에 변수로 작용할 가능성 - 새로운 측정 오차

• 컴퓨터 시스템이 시행 가능한 문항의 형태를 제한하거나 , 교과에 부적합할 가능성

• 검사를 위한 초기비용의 부담이 큼

장점 단점

2.4 컴퓨터개별적응검사

개인의 능력에 맞는 검사 필요

컴퓨터개별적응검사

2.4 컴퓨터개별적응검사

컴퓨터개별적응검사사전에 구축된 문제은행에서 컴퓨터의 연산 능력을 이용하여 피험자의 정답여부에 따라 능력수준에 부합하는 난이도를 가진 문항을 선택하여 제시하는 과정을 반복함으로써 피험자의 능력을 추정하는 검사방법

• 모든 학생들이 동일한 문항에 응답한 후 정답을 하면 조금 어려운 문항으로 틀린 경우는 보다 쉬운 문항을 푸는 방식으로 진행

2 단계 또는 다단계 검사

피라미드식 검사

현재 컴퓨터개별적응검사

• 초기에 분류검사를 시행하여 학생들의 능력을 판단한 후 각 능력 수준에 적합한 문제로 구성된 다음 단계의 시험을 치르게 함

• 문항반응이론의 적용• 모든 피험자들이 동일한 검사를 치르지 않고도

각각의 능력을 효과적으로 추정 가능

2.4 컴퓨터개별적응검사

문제은행

문항반응이론

검사알고리즘

컴퓨터개별적응검사

피험자의 능력에 맞는 문항을선별하기 위해 풍부한 문제 필요

피험자의 능력과 문항모수추정의 불변성 유지

검사시행의 논리초기문항부터 다음 문항을 제시하고 검사종료까지를 결정하는 기준

2.4 컴퓨터개별적응검사

장점 단점

• 피험자의 능력수준에서 크게 벗어나는 문항은 제공하지 않음

• 효율적인 검사 실시 - 시간 , 경비 절감

• 인쇄 및 운반 과정에서 나타날 수 있는 보안 문제와 시험 중 부정행위 근절

• 정답에 오류가 있어도 전체 검사 결과에는 큰 영향 없음

• 한번 응답한 문항에 대해 검토 , 수정이 어려움

• 컴퓨터사용이 주는 불편함으로 피험자들이 부담을 받음

• 맥락효과를 지니는 문항의 경우 문항이 제시되는 순서가 피험자마다 다르기 때문에 공정한 심사에 방해가 됨

• 특정 문항의 노출도가 지나치게 높아지거나 새로운 보안문제가 제기될 우려가 있음

• 지필검사와의 동등성이 완전히 검증되지 못함