교육평가 제5징 표준화검사화 컴퓨터화검사

제 5 장표준화검사와 컴퓨터화 검사

2015.03.

사회교육과

20140063

백 은 임

목 차

표준화 검사의 개념

표준화 검사의 유형

표준화 검사의 제작 절차

1

표준화 검사의 활용

컴퓨터화 검사

컴퓨터이용검사

5

컴퓨터화 검사의 발달6

4

3

2

7

컴퓨터개별적응검사8

표준화 검사란 ?

누가 사용하더라도 검사의 실시 , 채점 ,

및 결과의 해석이 동일하도록 절차와 방법을

일정하게 만들어 놓은 검사

표준화 검사의 개념

행동의 표본을 수집 규준 설정 개인의 행동과

비교

표준화 검사의 개념

표준화 검사

전문가에 의한 엄격한 실험절차

규준 체계적인 절차

높은 신뢰도 ,타당도 , 실용도

검사 수행 양식에 의한 분류최대수행검사

전형적 수행검사

표준어 검사의 유형

지능검사 적성검사 학력검사

성격검사 흥미검사 태도검사

지능검사 개인이 갖고 있는 일반적 지적 능력을 측정

적성검사 어떤 특정한 분야에서 요구되는 능력을 측정 어느정도의 성취를 할 것인지에 대한 예측 가능

학력검사 일반교사가 만드는 보통시험과 구별 수능 , 학업 성취도 검사

표준화 검사의 유형

성격검사 개인이 지속적으로 가지고 있는 성향 , 기질 측정 종류와 측정 내용이 다양함

흥미검사 어떤 대상에 대한 특별한 관심이나 주의를 측정

태도검사 어떤 대상에 대한 전형적 반응 경향을 측정 라커트 척도 , 써스톤 척도

표준화 검사의 유형

검사 매체에 의한 분류 언어검사 ( 주로 집단검사에 )

비언어검사 ( 주로 개인검사에 )

검사 대상 수에 의한 분류 개인검사 집단검사

표준화 검사의 유형

표준화 검사의 제작 절차

합당한 문항의 형식을 선택 ,그에 따른 다수의 문항을 제작

각 문항에 대한 난이도 조사와문항 변별도 분석을 통한 문항 선별

예비검사를 제작 , 활용 대상의 표본집단에 실시

평가의 목적 , 대상 그리고 검사를활용하고자 하는 대상의 범위 설정

표준화 검사의 제작 절차

활용대상의 표본집단을대상으로 검사 실시

검사 채점과규준 설정

신뢰도와 타당도산출 및 검증

결과에 따라 최종검사를 구성실시방법과 채점방법을 결정

표준화 검사의 활용

표준화 검사

학습지도

학생지도

교육정치교육연구

교사의 자질 향상

유의할 점

검사 목적에 가장 적절한 검사를 선정

결과의 해석과 교육적 의미 부여에 있어 신중

검사에 대한 객관적인 식견과 안목이 필요

검사 결과를 적극적으로 활용

표준화 검사의 활용

컴퓨터화 검사업무 처리

정보검색커뮤니티 형성

교육검사에 활용하려는 시도가 증가

Ex) 미국의 ETS, 한국 (2010.10 이후 )

컴퓨터화 검사

Why?

평가의 타당성 증가

표준화를 통한 신뢰도

증가

얻지 못했던 정보 획득

가능

검사 시행의 편리성

컴퓨터화 검사의 발달

컴퓨터 보조검사

컴퓨터 이용검사

컴퓨터 개별적응

검사

• 자필검사 채점 , 분석에 보조적인 역할• 시간 , 인력 , 비용 절약• 결과의 저장과 관리가 편함

• 컴퓨터를 통해 직접 검사 실시• 동영상 등이 포함된 다양한 유형의 문제 출제• 측정 불가능한 부분의 능력이 측정 가능

• 피험자의 능력 수준에 적합한 문항들을 선별하여 그 문항들로 구성된 검사를 개별적으로 실시

컴퓨터화 검사의 발달

지속적 측정

지능적 측정

• 교수적 측정은 통합적으로 운영• 성장 과정은 수시로 평가 , 저장되며 이후 학습과 수업의 근거의 역할을 수행

• 지식 기반과 추론 엔진의 미발달로 현실화가 어려움• 성장 과정과 학습 프로파일에 근거하여 적응적 이고 지적인 교수학습 안내

Bunderson, Inouye, & Olsen (1989)

컴퓨터화 검사의 발달

웹기반 검사 = 웹기반 평가

웹의 특성을 활용하여 검사나 평가를 하는 체계

컴퓨터화 검사가 웹을 활용하고

있는 것

장점

• 프로그램의 수정이 용이• 원활한 의사소통 가능• 다양한 프로그램의 통합적 지원 가능

단점

•시 험 감 독 이 없 으 므 로 본인확인 불가능• 컴퓨터와 네트워크의 성능이 변수가 될 수 있음

컴퓨터 이용 검사

연필과 시험지

키보드와 마우스

컴퓨터 이용 검사

다양한 형태의 자료를 문항에 포함 기존 검사에서 측정이 힘든 능력을 측정 가능

문장과 피험자에 대한 다양한 정보 제공 문항에 소요한 시간 , 푸는 방식 등

검사 시행에서의 편리성 즉각적인 피드백 제공 피험자의 발달 양상을 장기적으로 관리 가능

장기적으로 경제적

장 점

자필검사와의 동등성이 검증되지 않음 양식효과 : 검사 제시 방식이 검사에 미치는 영향

컴퓨터 조작 능력이 결과에 변수로 작용할 가능성 새로운 측정 오차 발생

시스템의 문항의 형태를 제한하여 일부 교과에 부적합함 복잡한 계산 과정 , 독해 요구 문제의 경우 가시성이

떨어짐검사 시행을 위한 초기 비용이 큼

컴퓨터 이용 검사단 점

컴퓨터 개별적응검사란 ?

사전에 구축된 문제은행에서 컴퓨터의

연산능력을 이용하여 피험자의 정답여부에

따라 능력수준에 부합하는 난이도를 가진

문항을 선택하여 제사하는 과정을

반복함으로써 피험자의 능력을 추정하는

검사방법

컴퓨터 개별적응검사

컴퓨터 개별적응검사

다단계 검사

복수검사 형식

분류검사 시행

능력수준 판정

능력 수준에 적합한 시험 시행

피라미드식 검사

동일한 문항 응답

정답어려운 문항

오답쉬운 문항

컴퓨터 개별적응검사

컴퓨터개별적응검사

‘ 문항반응이론’의 경우피험자 능력 불변성문항특성 불변성

각각 다른 문항들을 통해 검사를 치른 피험자들이라도 하나의 척도상에서 공통적인 기준을 통해 비교 해석이 가능

컴퓨터 개별적응검사

문제은행

검사 알고리즘

문항반응이론

컴퓨터개별적응검사

필요조건을 갖춘 양질의 문항을 제작◦정리◦보관 후 필요 시 사용할 수 있는 일련의 절차 내지 체제 기본적인 문항의 정보 + 문항의 통계적 분석정보

컴퓨터 개별적응검사

문제은행

문항반응이론

검사 알고리즘

피험자 능력과 문항모수의 추정의 불변성 유지컴퓨터 개별적응검사의 안정적인 운영에 효과적

검사 시행의 논리 특정 문항을 제시하는 기준 , 다음 문항을 선별하는 기준 , 검사를 종료하는 기준으로 구성

피험자의 능력 수준에서 문제 제공 지루함 , 불안감 감소와 검사에 몰입 효과

효율적이며 시간과 경비 절감 효과

보안 문제와 부정행위 예방 가능

정답에 오류가 있어도 결과에 큰 영향 없음 자기교정적특성상 합격여부에 큰 영향 없음

장 점 컴퓨터 개별적응검사

답의 검토 , 수정이 어려움피험자들에게 큰 부담을 주는 경향

수정 불가 , 검사 전략 사용불가 공정한 검사 방해

맥락효과 : 먼저 풀었던 문항이 이후에 계속되는 문항의 응답에

미치는 영향 여러 차례 실시됨에 따른 보안 문제

특정 문항의 노출도가 지나치게 높을 경우지필검사와의 동등성이 검증되지 않음

컴퓨터 개별적응검사단 점

실제 교육 현장에서 표준화 검사 활용에 대한 의문 표준화 검사의 경험과 표준화 검사 활용 내용을

생각해 보았을 때 , 실제로 표준화 검사 활용이 제대로 이루어지지 않는다 .

진로적성 검사 결과는 상담지도에 활용 되지 못하고 단순 확인 정도로 그친다

학업검사의 경우 학업능력 측정에만 활용된다 . 즉 , 학생의 학습을 도와주는 도구로 사용이 되지 못한다 . 한 때 시행되었던 초등학교 학업검사도 그렇다 .

의 견

표준화 검사의 결과가 그 학생에 대한 편견으로 자리잡을 수 있다 . 그러므로 교사는 표준화 검사를 활용할 때 주의가 필요하다

활용이 어려운 이유에는 교육적 환경도 포함되지만 표준화 검사 활용에 있어 교사의 노력이 많이 필요하다고 생각한다 . 교사가 직접 손발로 움직일 수 밖에 없다 .

의 견

컴퓨터이용검사 , 컴퓨터 개별적응검사는 학교에 적용이 가능할까 컴퓨터 보조검사만 경험해봤기 때문에 위의

검사들이 실제로 가능할까 의문을 가졌다 . 패드나 , 스마트폰을 이용한 수업이 증가하고

있는데 이러한 검사들이 학교에서 사용되는 것은 가능하다고 생각이 된다 .

다만 위 검사들을 적용하기 전에 피험자들이 그 시험에 적응 될 수 있도록 기회를 많이 제공해야 한다고 생각한다 .

의 견

자필검사에 익숙해진 사람들은 영어 독해 , 수학 문제 해결에 있어 쓰는 것에 많이 의존하기 때문이다 . 책에서 설명한 양식효과가 발생한다 .

토플의 IBT 의 경우 영어로 에세이하는 경우가 있기 때문에 영타 속도가 큰 변수라고 한다 . 즉 영어 능력 외에 컴퓨터 사용 능력도 평가하고 있는 셈이다 .

현재 시행되고 있는 컴퓨터 이용 검사의 경우 시험기관의 편리성과 효율성만 집중하고 있다고 생각한다 .

의 견