development of multi stage test item bank for measuring ... · dusit thani college journal...

16
Dusit Thani College Journal Vol.12 No.3 September - December 2018 Development of Multi-stage Test Item Bank for Measuring Multidimensional Knowledge Competency of Vocational Technical Teacher Students 600 กรพฒนคลงขสบบบลยขนตนพวดสมรรถนดนควมรวชชพพมต ขงนกศกษครชงตสกรรม Development of Multi-stage Test Item Bank for Measuring Multidimensional Knowledge Competency of Vocational Technical Teacher Students สกญญ บญศร นสตลกสตรดษฎบณฑตสขวชกรวดลปรมนผลกรศกษ ภควชวจยลจตวทยกรศกษ คณครศสตร จลงกรณมวทยลย Sukanya Boonsri Ph.D. Student in Educational Measurement and Evaluation Department of Educational, Research and Psychology, Faculty of Education Chulalongkorn University, E-mail: sukanya_bo@rmutt.ac.th กมลวรรณ ตงธนกนนท รงศสตรจรย ปรจสขวชกรวดลปรมนผลกรศกษ ภควชวจยลจตวทยกรศกษ คณครศสตร จลงกรณมวทยลย Kamonwan Tangdhanakanond Associate Professor, Ph.D., Department of Educational Research and Psychology Faculty of Education, Chulalongkorn University, E-mail: tkamonwan@hotmail.com ศรชย กญจนวส ศสตรจรย ปรจสขวชกรวดลปรมนผลกรศกษ ภควชวจยลจตวทยกรศกษ คณครศสตร จลงกรณมวทยลย Sirichai Kanjanawasee Professor, Ph.D., Department of Educational Research and Psychology Faculty of Education, Chulalongkorn University, E-mail: Sirichai.k@chula.ac.th Abstract The research aimed to 1) develop and validate the quality of the multidimensional knowledge competency tests for vocational technical teachers, and 2) develop an multi - stage item pool for measuring the multidimensional knowledge competency for vocational technical teachers. The knowledge competency tests were used to collect data from 936 seniors in technical education program of the Rajamangala University. AIC and G 2 statistics

Upload: others

Post on 25-Mar-2020

0 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

Dusit Thani College Journal Vol.12 No.3 September - December 2018

Development of Multi-stage Test Item Bank for Measuring Multidimensional Knowledge Competency of Vocational Technical Teacher Students 600

การพฒนาคลงขอสอบแบบหลายขนตอนเพอวดสมรรถนะดานความรวชาชพพหมต ของนกศกษาครชางอตสาหกรรม

Development of Multi-stage Test Item Bank for Measuring Multidimensional

Knowledge Competency of Vocational Technical Teacher Students

สกญญา บญศร นสตหลกสตรดษฎบณฑตสาขาวชาการวดและประเมนผลการศกษา ภาควชาวจยและจตวทยาการศกษา คณะครศาสตร จฬาลงกรณมหาวทยาลย

Sukanya Boonsri

Ph.D. Student in Educational Measurement and Evaluation

Department of Educational, Research and Psychology, Faculty of Education

Chulalongkorn University, E-mail: [email protected]

กมลวรรณ ตงธนกานนท

รองศาสตราจารย ประจ าสาขาวชาการวดและประเมนผลการศกษา

ภาควชาวจยและจตวทยาการศกษา คณะครศาสตร จฬาลงกรณมหาวทยาลย

Kamonwan Tangdhanakanond

Associate Professor, Ph.D., Department of Educational Research and Psychology

Faculty of Education, Chulalongkorn University, E-mail: [email protected]

ศรชย กาญจนวาส ศาสตราจารย ประจ าสาขาวชาการวดและประเมนผลการศกษา ภาควชาวจยและจตวทยาการศกษา

คณะครศาสตร จฬาลงกรณมหาวทยาลย

Sirichai Kanjanawasee

Professor, Ph.D., Department of Educational Research and Psychology

Faculty of Education, Chulalongkorn University, E-mail: [email protected]

Abstract The research aimed to 1) develop and validate the quality of the multidimensional

knowledge competency tests for vocational technical teachers, and 2) develop an multi-

stage item pool for measuring the multidimensional knowledge competency for vocational

technical teachers. The knowledge competency tests were used to collect data from 936

seniors in technical education program of the Rajamangala University. AIC and G2 statistics

Page 2: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

วารสารวทยาลยดสตธาน ปท 12 ฉบบท 3 เดอนกนยายน - ธนวาคม 2561

การพฒนาคลงขอสอบแบบหลายขนตอนเพอวดสมรรถนะดานความรวชาชพพหมตของนกศกษาครชางอตสาหกรรม 601

were employed to validate the model , OUTFIT MNSQ and INFIT MNSQ were also used to

validate of items. The research findings were as follows: 1) The G2 value and the AIC of a multidimensional

model of the four tests were smaller than the unidimensional model. The EAP reliability of

the third tests was the highest, followed by the first, the second, and the fourth tests,

respectively. The EAP reliability of the first dimension were .835, .797, .794, and .755, whereas

the EAP reliability of the second dimension were .815, .807, .696, and .694, respectively. Three hundred and ninety seven test items had OUTFIT MNSQ and INFIT MNSQ within the

criteria. 2) There were 234 items in the item pools for the first dimension. Among these

numbers of items, there were 42, 148, and 44 items in the easy, moderate, and difficult

modules, respectively. There were 163 items in the item pools for the second dimension. Among these numbers of items, there were 28, 107, and 28 items in the easy, moderate, and

difficult modules, respectively.

Keywords: Test Items Bank, Knoweledge Competency, Voctional Technical Teacher,

Multidimensional Item Response Model

บทคดยอ

การวจยครงนมวตถประสงค 1) เพอสรางและตรวจสอบคณภาพของแบบวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม และ 2) เพอพฒนาคลงขอสอบแบบหลายขนตอนส าหรบวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม เกบรวบรวมขอมลจากตวอยางนกศกษาชนปท 4 หลกสตรครศาสตรอตสาหกรรมบณฑต มหาวทยาลยเทคโนโลยราชมงคล จ านวน 936 คน โดยใชแบบวดสรรรถนะความรวชาชพพหมตของครชางอตสาหกรรม วเคราะหขอมลเพอตรวจสอบความตรงเชงโครงสรางแบบพหมตดวยคาดชน AIC และคา G2 ตรวจสอบคณภาพของขอสอบรายขอดวยคาดชน OUTFIT MNSQ และ INFIT MNSQ

ผลการวจยพบวา 1) แบบวดทง 4 ฉบบ มคา AIC และคา G2 ในโมเดลแบบพหมตนอยทสดเมอเทยบกบโมเดลเอกมต และเมอทดสอบความแตกตางของคา G2 พบวา ทกฉบบมความแตกตางอยางมนยส าคญทางสถตทระดบ .05 เมอตรวจสอบคณภาพดานความเทยงแบบ EAP ในมตความรวชาชพคร พบวา แบบวดฉบบท 3 มคาความเทยงสงสด รองลงมาคอ ฉบบท 1 ฉบบท 2 และฉบบท 4 (.835, .797, .794 และ .755) เชนเดยวกบมตความรวชาชพพนฐานชางอตสาหกรรม มคา EAP เทากบ .815, .807, .696 และ .694 ตามล าดบ สวนคณภาพขอสอบรายขอมคา OUTFIT MNSQ และ INFIT MNSQ อยในเกณฑทก าหนดจ านวน 397 ขอ และ 2) เมอน าขอสอบไปบรรจในคลงขอสอบแบบหลายขนตอน พบวา มขอสอบในมตความรวชาชพครจ านวน 234 ขอ แบงเปนโมดลระดบงาย 42 ขอ ระดบปานกลาง 148 ขอ และระดบงาย 44 ขอ และม

Page 3: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

Dusit Thani College Journal Vol.12 No.3 September - December 2018

Development of Multi-stage Test Item Bank for Measuring Multidimensional Knowledge Competency of Vocational Technical Teacher Students 602

ขอสอบในมตความรวชาชพพนฐานอตสาหกรรม 163 ขอ แบงเปนโมดลระดบงาย 28 ขอ ระดบปานกลาง 107 ขอ และระดบงาย 28 ขอ

ค าส าคญ : คลงขอสอบ สมรรถนะความรวชาชพ ครชางอตสาหกรรม โมเดลการตอบสนองขอสอบพหมต

บทน า

สถาบนการศกษาทท าหนาทผลตครอาชวศกษาในสาขาวชาชพชางอตสาหกรรมนนสวนใหญจะเปนกลมมหาวทยาลยเทคโนโลยพระจอมเกลา และกลมมหาวทยาลยเทคโนโลยราชมงคล โดยหนวยงานดงกลาวจะผลตบณฑตหลกสตรครศาสตรอตสาหกรรมบณฑต เพอใหบณฑตเหลานออกไปปฏบ ตหนาทเปนครชางอตสาหกรรมในสาขาวชาตาง ๆ ไดแก ครชางไฟฟา ครชางกลโรงงาน ครชางยนต ครชางอเลกทรอนกส เปนตน ซงสมรรถนะทส าคญในการประกอบวชาชพของครชางอตสาหกรรมนนคอสมรรถนะวชาชพครชางอตสาหกรรม โดยสมรรถนะนนประกอบดวยความร ท กษะ และเจคตทดในการประกอบอาชพ ส าหรบสมรรถนะเบองตนทเปนพนฐานอนดบแรกส าหรบครชางอตสาหกรรมทตองมกอนเปนอนดบแรกคอ สมรรถนะความรในวชาชพครชางอตสาหกรรม ซงสอดคลองกบประสบการณของผวจย และอาจารยนเทศในหลกสตรครศาสตรอตสาหกรรม รวมถงจากผลการศกษาวจยของ อรามศร อาภาอดล, อครตน พลกระจาง และราตร ศรพนธ (2554) ทไดศกษาเกยวกบสภาพปญหาทเกยวของกบครอาชวศกษาในทกสาขาวชา ไดแก สาขาวชาอตสาหกรรม สาขาวชาพาณชยกรรม สาขาวชาคหกรรม สาขาวชาเกษตรกรรม และสาขาวชาศลปกรรม พบวา ปญหาส าคญนนเกยวของกบเรองความรความสามารถของคร โดยครยงขาดความร ความสามารถ และทกษะในการจดการเรยนการสอน ขาดความช านาญในวชาชพ โดยเฉพาะอยางยงครอาชวศกษาทจบใหมจะไมสามารถสอนวชาปฏบตได รวมทงขาดความรในวชาชพครท าใหเกดปญหาตาง ๆ ในการจดการเรยนการสอน ไมวาจะเปนเรองการพฒนาหลกสตร การพฒนาสอการสอน การวจย การวดและประเมนผล เปนตน อกทงยงขาดความรทางวชาชพ โดยเฉพาะวชาชพพนฐานทมความจ าเปนในการสอนระดบอาชวศกษา

จากขอมลดงกลาวเปนผลมาจากการวจยทใชการเกบรวบรวมขอมลดวยการสอบถามความคดเหนหรอความรสกของครอาชวศกษา ดงนนจงควรมเครองมอทใชส าหรบทดสอบเพอวดสมรรถนะความรวชาชพทางดานอาชวศกษา และจากการศกษาในประเทศไทยพบวา เครองมอทใชส าหรบวดสมรรถนะความรวชาชพครชางอตสาหกรรมโดยตรงยงมไมชดเจน แตสวนใหญเปนการวดทเกดขนในรายวชาแตละวชาภายในหลกสตรเทานน หรอถาส าเรจการศกษาเปนบณฑตแลวกจะเปนการวดเฉพาะในสวนของความรวชาชพครซงวดโดยครสภาเพอขอรบใบประกอบวชาชพคร ดงนนผวจยจงสนใจทจะพฒนาแบบวดสมรรถนะความรวชาชพครชางอตสาหกรรมขน เพอน าไปจดท าเปนคลงขอสอบไวส าหรบวดและประเมนผลสมรรถนะนกศกษาครชางอตสาหกรรมกอนฝกประสบการณวชาชพครในชนปท 4 และหลงฝกประสบการณวชาชพครในชนปท 5 เพอเปนการวดและประเมนผลสรปรวม (summative evaluation) สมรรถนะความรทจ าเปนส าหรบครชาง

Page 4: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

วารสารวทยาลยดสตธาน ปท 12 ฉบบท 3 เดอนกนยายน - ธนวาคม 2561

การพฒนาคลงขอสอบแบบหลายขนตอนเพอวดสมรรถนะดานความรวชาชพพหมตของนกศกษาครชางอตสาหกรรม 603

อตสาหกรรม และดวยลกษณะของสมรรถนะความรวชาชพชางอตสาหกรรมทประกอบดวยความรใน 2 ดานหลก ๆ ไดแก ความรวชาชพคร และความรวชาชพชางอตสาหกรรม ดงนนผวจยจงสนใจพฒนาคลงขอสอบนใหเปนแบบพหมตและจดท าคลงแบบหลายขนตอนเพอใหการวดครอบคลมความรทงสองดาน รวมทงใหสารสนเทศของขอสอบไดด และสอดคลองกบธรรมชาตของสมรรถนะดงกลาว

วตถประสงค 1. เพอสรางและตรวจสอบคณภาพของแบบวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม

2. เพอพฒนาคลงขอสอบแบบหลายขนตอนส าหรบวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม

ขอบเขตการวจย

1. ตวแปรในการวจย ไดแก สมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม ซงแบงออกเปน 2 มต โดยในแตละมตประกอบดวยตวชวด (ตวแปรยอย) ดงรายละเอยด ตอไปน 1.1 มตความรวชาชพคร ประกอบดวยตวชวด 7 ตว ไดแก ความเปนคร คณธรรมจรยธรรม และจรรยาบรรณ ปรชญาการศกษา ภาษาและวฒนธรรม จตวทยาส าหรบคร หลกสตร การจดการเรยนรและการจดการชนเรยน การวจยเพอพฒนาการเรยนร นวตกรรมและเทคโนโลยสารสนเทศทางการศกษา และการวดและประเมนผลการเรยนร และการประกนคณภาพการศกษา 1.2 มตความรวชาชพพนฐานชางอตสาหกรรม ประกอบดวยตวชวด 5 ตว ไดแก ความรเกยวกบงานอาชพ คอมพวเตอรและสารสนเทศเพองานอาชพ เขยนแบบเทคนคเบองตน วสดงานชางอตสาหกรรม และงานฝกฝมอ

2. ประชากรและตวอยาง 2.1 ประชากร เปนนกศกษาหลกสตรครศาสตรอตสาหกรรมบณฑต ชนปท 4 มหาวทยาลย

เทคโนโลยราชมงคล สงกดส านกงานคณะกรรมการการอดมศกษา ปการศกษา 2559 จ านวน 1,100 คน 2.2 ตวอยาง ในการวจยครงนผวจยก าหนดขนาดตวอยางส าหรบการวจยในตวแปรพหประมาณ 10-

20 คนตอหนงตวแปร (Hair, Black, Babin, Anderson, & Tatham, 2010) ซงการวจยนใชวธการวเคราะหขอมลตามแนวทฤษฎการตอบสนองขอสอบแบบพหมต ผวจยจงไดก าหนดขนาดตวอยาง 20 คนตอ 1 ตวแปร โดยมตวแปรชวดสมรรถนะความรวชาชพครชางอตสาหกรรม ทงหมด 12 ตวแปร จะไดขนาดตวอยางขนต าอยางนอย 240 คน แตเพอความแมนย าในการประมาณคาพารามเตอรมากขน ผวจยจงไดปรบขนาดตวอยางเปน 500 คน ซงใชวธการสมตวอยางแบบหลายขนตอน (Multi-stage Random Sampling) โดยขนตอนแรกสมมหาวทยาลยเทคโนโลยราชมงคล ภมภาคละ 1 มหาวทยาลย จาก 4 ภมภาค ไดแก ภาคเหนอ ภาคกลาง ภาคตะวนออกเฉยงเหนอ และภาคใต ดวยวธการสมอยางงาย (Simple Random Sampling) และขนทสองสมนกศกษาจากแตละมหาวทยาลยดวยการสมแบบแบงชน (Stratified Random Sampling) มาอยางละ

Page 5: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

Dusit Thani College Journal Vol.12 No.3 September - December 2018

Development of Multi-stage Test Item Bank for Measuring Multidimensional Knowledge Competency of Vocational Technical Teacher Students 604

เทา ๆ กน ภมภาคละ 125 คน ทงนเพอใหการประมาณคาพารามเตอรมความแมนย ามากขน ผวจยจงไดเกบขอมลตวอยางเพมขน รวมเปนตวอยางทงสน 936 คน

กรอบแนวคด

การวจยเรอง “การพฒนาคลงขอสอบแบบหลายขนตอนเพอวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม” มกรอบแนวคดในการวจยดงภาพท 1

ภาพท 1 กรอบแนวคดในการวจย

นยามศพท คลงขอสอบแบบหลายขนตอน หมายถง ทบรรจขอสอบวดสมรรถนะความรวชาชพพหมตของคร

ชางอตสาหกรรม ทไดจากการวเคราะหขอสอบตามแนวทฤษฎการตอบสนองขอสอบแบบพหมต ซงขอสอบทบรรจในคลงจะแบงออกเปน 3 โมดล ไดแก โมดลระดบงาย มคาความยากของขอสอบ (b) อยระหวาง -3 ถง -1 โมดลระดบปานกลาง มคาความยากของขอสอบอยระหวาง -1 ถง 1 และโมดลระดบยาก มคาความยากของขอสอบอยระหวาง 1 ถง 3

สมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม หมายถง ความสามารถของนกศกษาหลกสตรครศาสตรอตสาหกรรมในการท าแบบวดความรวชาชพพหมตของครชางอตสาหกรรม ซงวดความรใน 2 มต ดงน 1) ความรวชาชพคร ประกอบดวย 7 ตวชวด ไดแก ความเปนคร คณธรรมจรยธรรม และจรรยาบรรณ ปรชญาการศกษา ภาษาและวฒนธรรม จตวทยาส าหรบคร หลกสตร การจดการเรยนรและการจดการชนเรยน การวจยเพอพฒนาการเรยนร นวตกรรมและเทคโนโลยสารสนเทศทางการศกษา และการวดและประเมนผลการเรยนร และการประกนคณภาพการศกษา และ 2) ความร ว ชาชพพ นฐานชาง

สมรรถนะความร วชาชพพหมตของคร ชางอตสาหกรรม

การทดสอบแบบหลายขนตอน MST 1. คลงขอสอบ 2. การจดโมดล (ยาก ปานกลาง งาย)

การวจยเพอพฒนาการเรยนร

นวตกรรมและเทค น ลยสารสนเทศทางการศกษา

การวดและการประเมน ลการเรยนร และ การประกนค ภาพการศกษา

ความร วชาชพคร

ความร วชาชพพน านชางอตสาหกรรม

ค วามเป นคร ค รรม จรย รรมและจรรยาบรร

Page 6: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

วารสารวทยาลยดสตธาน ปท 12 ฉบบท 3 เดอนกนยายน - ธนวาคม 2561

การพฒนาคลงขอสอบแบบหลายขนตอนเพอวดสมรรถนะดานความรวชาชพพหมตของนกศกษาครชางอตสาหกรรม 605

อตสาหกรรม ประกอบดวย 5 ตวชวด ไดแก ความรเกยวกบงานอาชพ คอมพวเตอรและสารสนเทศเพองานอาชพ เขยนแบบเทคนคเบองตน วสดงานชางอตสาหกรรม และงานฝกฝมอ โดยสมรรถนะทง 2 มตนวดในโมเดลการตอบสนองขอสอบแบบพหมตระหวางขอสอบ

การทบทวนวรร กรรม การทดสอบแบบหลายขนตอน (Multi-stage Test: MST) เปนการทดสอบทจดชดขอสอบเปนโมดล

(Modules) ในแตละโมดลจะบรรจขอสอบทแบงตามระดบความยากงายของขอสอบ โดยทวไปการทดสอบแบบหลายขนตอนนยมน าไปใชกบการทดสอบแบบปรบเหมาะดวยคอมพวเตอร (Computer Adaptive

Test) เนองจากการทดสอบแบบหลายขนตอนจะมขอสอบหลายขอในแตละโมดล และยงอนญาตใหผสอบสามารถทบทวนหรอแกไขค าตอบไดกอนทจะท าขอสอบในโมดลถดไป (Armstrong & Little, 2003; Guille

et al.,2011; Luecht & Sireci, 2011; Zenisky, 2004 cited in Brossman & Guille, 2014) ในการทดสอบแบบ MST จะออกแบบขอสอบเปนโมดล ซงโมดลของ MST นจะถกสรางเปนรปแบบของบลอก โดยทวไปในแตละโมดลจะสรางตามระดบของเนอหาจบคกบรายการเนอหาในแบบสอบทงฉบบ ในสวนของรายละเอยดดานสถตนนจะแตกตางกนระหวางโมดล เชน แตกตางกนตามระดบความยากงายของขอสอบ และในการทดสอบแบบหลายขนตอนสามารถท าไดหลายรปแบบขนอยกบการออกแบบคลงขอสอบวาจะพฒนาในรปแบบใด เชน โครงสรางแบบ 1-3-3 จะแบงเปน 3 ขนตอน ดงน ในขนตอนท 1 จะม 1 โมดล ขนตอนท 2 จะม 3 โมดล และขนตอนท 3 จะม 3 โมดล ดงภาพท 2 เปนตวอยางของ MST ทประกอบดวย 3 ขนตอน แตแตกตางกนในสวนของโมดล โดยภาพ a จะเปนโครงสรางแบบ 1-2-2 และภาพ b จะเปนโครงสรางแบบ 1-3-3

ภาพท 2 ตวอยางขนตอนของวธ MST ทมา: Zenisky, Hambleton and Luecht (2010)

Page 7: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

Dusit Thani College Journal Vol.12 No.3 September - December 2018

Development of Multi-stage Test Item Bank for Measuring Multidimensional Knowledge Competency of Vocational Technical Teacher Students 606

โมเดลการตอบสนองขอสอบแบบพหมต ถอวาคณลกษณะแฝงของบคคลมากกวา 1 องคประกอบ สงผลตอการตอบขอสอบ ดงนนพารามเตอรความสามารถของผสอบจงมตงแต 2 พารามเตอรขนไป สงผลใหการพจารณาความสามารถหลายมตของบคคลนาจะชวยท าใหโมเดลมความสอดคลองกบขอมลไดดยงขน เมอผสอบใชความสามารถหลายมตทแตกตางกนอยางเปนระบบในการตอบขอสอบยอมมความสมพนธกบระดบความยากและอ านาจจ าแนกของขอสอบรายขอ และมผลตอความนาจะเปนในการตอบขอสอบไดถกตอง ในการวเคราะหโมเดลการตอบสนองขอสอบแบบพหมตสามารถท าได 2 วธ คอการวเคราะหโดยใชโมเดลเชงส ารวจ (Exploratory Model) และการวเคราะหโดยใชโมเดลเชงยนยน (Confirmatory Model) ซงมแนวคดคลายกบการวเคราะหองคประกอบ (Factor Analysis) ยกตวอยางเชน แบบสอบทสรางขนเพอมงวดคณลกษณะแฝงหรอความสามารถของบคคล 3 ดาน (3 มตหรอ 3 องคประกอบ) ความสมพนธระหวางคณลกษณะของขอสอบและความสามารถของผสอบทสงผลตอความนาจะเปนของการตอบขอสอบไดถกตอง (ศรชย กาญจนวาส, 2555) สามารถเขยนโมเดลการวดแบบพหมตไดดงภาพท 3

A: Between-Items MIRT Model B: Within-Items MIRT Model

ภาพท 3 A: โมเดลการตอบสนองขอสอบแบบพหมตระหวางขอสอบ และ B: โมเดลการตอบสนองขอสอบแบบพหมตภายในขอสอบ

จากภาพท 3 ภาพ A เปนโมเดลการตอบสนองขอสอบแบบ 3 มต ซงความสามารถทง 3 ดาน มความเกยวของสมพนธกนโดยความสามารถแตละดานถกวดระหวางขอสอบตางชดกน (Between-items) หรอคณลกษณะแฝงแตละดานถกวดโดยใชขอสอบตางชดกน สวนภาพ B เปนโมเดลการตอบสนองขอสอบแบบ 3 มต ซงความสามารถทง 3 ดาน มความเกยวของสมพนธกนโดยความสามารถแตละดานถกวดภายในขอสอบชดเดยวรวมกน (within-items) ซงในการวจยครงนใชโมเดลการตอบสนองขอสอบแบบพหมตระหวางขอสอบ (Between-Items MIRT Model)

ในการวดสมรรถนะนนเปนความสามารถของบคคลในการทจะท างานใหประสบความส าเรจ ซงในการท างานใหไดนนตองประกอบไปดวย 3 สวน คอ ความร ทกษะ และเจตคตหรอความมงมนตอการท างาน ส าหรบในการวจยครงนเปนการศกษาสมรรถนะความรวชาชพครชางอตสาหกรรม ซงประกอบดวยความรวชาชพคร และวชาชพพนฐานชางอตสาหกรรม โดยความรวชาชพครนนไดมาจากมาตรฐานความรและประสบการณวชาชพทครสภาก าหนดไว (ราชกจจานเบกษา, 2556) และความรวชาชพพนฐานชางอตสาหกรรมนนไดจากการสงเคราะหเอกสารหลกสตร ปวช. พ.ศ. 2556 (ส านกงานคณะกรรมการการอาชวศกษา, 2556)

Page 8: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

วารสารวทยาลยดสตธาน ปท 12 ฉบบท 3 เดอนกนยายน - ธนวาคม 2561

การพฒนาคลงขอสอบแบบหลายขนตอนเพอวดสมรรถนะดานความรวชาชพพหมตของนกศกษาครชางอตสาหกรรม 607

ว ด าเนนการวจย เครองมอวจย

เครองมอทใชในการวจยเปนแบบวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม ซงเปนขอสอบแบบเลอกตอบ 4 ตวเลอก (Multiple Choices) จ านวน 4 ฉบบ ทมความเทาเทยมกน (Equivalent

Tests) โดยในแตละฉบบจะมขอสอบทงสน 120 ขอ แบงออกเปน 2 มต ไดแก มตความรวชาชพคร (7 ตวชวด) จ านวน 70 ขอ และมตความรวชาชพชางพนฐานอตสาหกรรม (5 ตวชวด) จ านวน 50 ขอ

การวเคราะหขอมลและสถต 1. วเคราะหคณภาพของแบบวดดานความตรงตามโครงสราง (Construct Validity) แบบพหมต

โดยใชโปรแกรม ConQuest (Wu, Adams, & Wilson, 2007) ภายใตการวเคราะหโมเดลดวยทฤษฎการตอบสนองขอสอบแบบ 1 พารามเตอร (วเคราะหคา b หรอคาความยากของขอสอบ) เพอตรวจสอบความตรงของโมเดลแบบพหมต ดงนนจงพจารณาคาสถตความสอดคลอง (Item Fit Statistics) ตาง ๆ ไดแก คา Akaike Information Criterion (AIC) และคา Deviance Index (G2) โดยพจารณาจากเกณฑคอ คาเหลานควรมคาต า ๆ ซงใชวธการเปรยบเทยบโมเดล ถาโมเดลใดมคาเหลานต ากวาจะถอวาโมเดลมความสอดคลองกบขอมลเชงประจกษมากกวา (Briggs & Wilson, 2003) และทดสอบนยส าคญทางสถตจากการเปรยบเทยบความกลมกลนระหวางโมเดลเอกมตกบพหมต โดยใชสถตทดสอบทเรยกวา Likelihood Ratio ซงมคาเทากบผลตางของคา G2 ระหวางโมเดลเอกมตกบพหมต

2. วเคราะหคณภาพของแบบวดดานความเทยงแบบ EAP (Expected-a-posteriori) เพอเปนการยนยนวาแบบวดทผวจยพฒนาขนใหผลการวดสมรรถนะในแตละมตคงเสนคงวาหรอไม ซงเปนการประมาณคาความคงเสนคงวาภายใน (Internal Consistency) ของแบบวดทใหความสนใจกบสดสวนความแปรปรวนของคาความสามารถสมรรถนะความรวชาชพแตละดานของผสอบทประมาณไดจากโมเดลการวดตอความแปรปรวนทงหมดทมความแปรปรวนของความคลาดเคลอนรวมอยดวย ดงนนถาความแปรปรวนของคาประมาณความสามารถสมรรถนะความรวชาชพครทประมาณไดยงมาก คาความเทยงกจะมคาเขาใกล 1 มากยงขน แสดงวาคาความสามารถสมรรถนะความรวชาชพครทประมาณไดจากโมเดลมความคงเสนคงวา

3. วเคราะหคณภาพขอสอบรายขอของขอสอบดวยดชน OUTFIT MNSQ และ INFIT MNSQ ซง Lunz, Wright และ Linacre (1990) เสนอใหใชคา OUTFIT MNSQ และ INFIT MNSQ ทมคาอยระหวาง 0.60 ถง 1.50 จงจะแสดงวาโมเดลมความเหมาะสมกบขอสอบรายขอ

Page 9: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

Dusit Thani College Journal Vol.12 No.3 September - December 2018

Development of Multi-stage Test Item Bank for Measuring Multidimensional Knowledge Competency of Vocational Technical Teacher Students 608

สรป ลการวจย

1. ลการตรวจสอบค ภาพของแบบวด

1.1 ค ภาพดานความตรงเชง ครงสรางของแบบวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม

ผลการตรวจสอบความตรงเชงโครงสรางของแบบวดสมรรถนะ ใชวธการประเมนเพอเปรยบเทยบโมเดล (Competing Models) ระหวางโมเดลแบบพหมตกบโมเดลแบบเอกมต ซงประเมนจากความสอดคลองกลมกลนของโมเดลกบขอมลเชงประจกษ โดยพจารณาจากคาสถตความสอดคลอง (Item Fit Statistics) ตาง ๆ ไดแก คาสถตดเวยนซ (Deviance Statistic: G2) คาสารสนเทศเอไคค (Akaike Information Criterion: AIC) และเปรยบเทยบความกลมกลนระหวางโมเดลเอกมตกบพหมตโดยใชสถตทดสอบทเรยกวา Likelihood Ratio ซงมคาเทากบผลตางของคา G2 ระหวางโมเดลเอกมตกบพหมต ซงใชหลกการแจกแจงแบบ ไคสแควร ผลดงแสดงในตารางท 1 จะเหนไดวาแบบวดทง 4 ฉบบ มคาสถตทแสดงความสอดคลองตาง ๆ ไดแก คา G2 และคา AIC ของโมเดลพหมตมคานอยกวาโมเดลเอกมต ดงนนแสดงวาโมเดลการวดสมรรถนะความรวชาชพครชางอตสาหกรรมมความเหมาะสมกบโมเดลพหมต และเมอทดสอบความแตกตางของคา G2 ระหวางโมเดลเอกมตกบพหมต พบวามความแตกตางกนอยางมนยส าคญทางสถตทระดบ .05 ทกฉบบ

ตารางท 1 ผลการเปรยบเทยบโมเดลเพอตรวจสอบความตรงเชงโครงสรางของแบบวดสมรรถนะความรวชาชพครชางอตสาหกรรมแบบพหมตของแบบวดแตละฉบบ

แบบวด มเดล G2 AIC จ านวนพารามเตอร 1 1. เอกมต 34,685.445 34,927.445 121

2. พหมต 34,599.362 34,845.362 123

ผลตางของคา G2 ระหวางโมเดล 2= 86.083, df = 2, p < .05

2 1. เอกมต 26,904.090 27,146.090 121

2. พหมต 26,861.315 27,107.315 123

ผลตางของคา G2 ระหวางโมเดล 2= 42.775, df = 2, p < .05

3 1. เอกมต 30,001.869 30,243.869 121

2. พหมต 29,954.316 30,200.316 123

ผลตางของคา G2 ระหวางโมเดล 2= 47.553, df = 2, p < .05

4 1. เอกมต 36,627.688 36,869.688 121

2. พหมต 36,514.501 36,760.501 123

ผลตางของคา G2 ระหวางโมเดล 1 กบ 3 2= 113.187, df = 2, p < .05

Page 10: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

วารสารวทยาลยดสตธาน ปท 12 ฉบบท 3 เดอนกนยายน - ธนวาคม 2561

การพฒนาคลงขอสอบแบบหลายขนตอนเพอวดสมรรถนะดานความรวชาชพพหมตของนกศกษาครชางอตสาหกรรม 609

1.2 การตรวจสอบความเทยงของแบบวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม

ผลการตรวจสอบคณภาพดานความเทยงแบบพหมตของแบบวดแตละฉบบดวยคาสถตความเท ยงแบบ EAP แบงออกเปน 2 มต ไดแก มตความรวชาชพคร และมตความรวชาชพชางพนฐานอตสาหกรรม โดยในมตความรวชาชพคร พบวาแบบวดฉบบท 3 มคาความเทยงสงสด โดยมคาความเทยงเทากบ .835 รองลงมาคอ แบบวดฉบบท 1 ฉบบท 2 และฉบบท 4 (.797, .794 และ .755) ตามล าดบ และเมอพจารณาทมตความรวชาชพชางพนฐานอตสาหกรรม พบวา แบบวดฉบบท 3 มคาความเทยงสงสด โดยมคาความเทยงเทากบ .815 รองลงมาคอ แบบวดฉบบท 1 ฉบบท 2 และฉบบท 4 (.807, .696 และ .694) ตามล าดบ ดงแสดงในตารางท 2 ตามล าดบ

ตารางท 2 คาความเทยงแบบ EAP ของแบบวดแตละฉบบจ าแนกตามมตการวด

มตทวด แบบวด

1 2 3 4

1. ทงฉบบ (แบบเอกมต) .830 .773 .878 .788

2. ความรวชาชพคร .797 .794 .835 .755

3. ความรวชาชพพนฐานชางอตสาหกรรม .807 .696 .815 .694

1.3 การตรวจสอบค ภาพขอสอบรายขอ

การตรวจสอบคณภาพขอสอบรายขอตามทฤษฎการตอบสนองขอสอบในครงนใชดชนวดความเหมาะสมของขอสอบรายขอ 2 คา ไดแก คา OUTFIT MNSQ (OUTFIT Mean Square หรอ Unweighted Mean Square) แ ล ะ ค า INFIT MNSQ ( INFIT Mean Square ห ร อ Weighted Mean

Square) โดย Lunz, Wright และ Linacre (1990) เสนอใหใชคา OUTFIT MNSQ และ INFIT MNSQ ทมคาอยระหวาง 0.60 ถง 1.50 จงจะแสดงวาโมเดลมความเหมาะสมกบขอสอบรายขอ ซงผลการวเคราะหคณภาพขอสอบทง 4 ฉบบ มดงน 1) แบบวดฉบบท 1 มคาดชน OUTFIT MNSQ และ INFIT MNSQ อยระหวาง 0.66 ถง 1.52 ซงอยในเกณฑทก าหนดเปนสวนใหญ ยกเวนขอท 44 และ 82 ทไมอยในเกณฑทก าหนด 2) แบบวดฉบบท 2 มคาดชน OUTFIT MNSQ และ INFIT MNSQ อยระหวาง 0.75 ถง 1.40 ซงอยในเกณฑทกขอ 3) แบบวดฉบบท 3 มคาดชน OUTFIT MNSQ และ INFIT MNSQ อยระหวาง 0.63 ถง 1.80 ซงอยในเกณฑเปนสวนใหญ ยกเวนขอสอบจ านวน 10 ขอ ไดแก ขอท 3, 51, 53, 54, 77, 89, 92, 93, 96 และ 103

และ 4) แบบวดฉบบท 4 มคาดชน OUTFIT MNSQ และ INFIT MNSQ อยระหวาง 0.66 ถง 1.40 ซงอยในเกณฑทก าหนดไวทกขอ จากผลการวเคราะหแบบวดทง 4 ฉบบ จะไดขอสอบทมคณภาพตามเกณฑดงกลาว 468 ขอ แตในการสรางแบบวดทง 4 ฉบบ ครงนผวจยไดสรางขอสอบรวมกนของแบบวดทง 4 ฉบบ ๆ ละ 24 ขอ ดงนนเมอตดจ านวนขอสอบทซ ากนออกแลวจะเหลอขอสอบทใชไดจรงจ านวน 397 ขอ ดงแสดงในตารางท 3

Page 11: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

Dusit Thani College Journal Vol.12 No.3 September - December 2018

Development of Multi-stage Test Item Bank for Measuring Multidimensional Knowledge Competency of Vocational Technical Teacher Students 610

ตารางท 3 ผลการวเคราะหคณภาพขอสอบรายขอของแบบวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม

แบบวด OUTFIT MNSQ และ INFIT MNSQ ขอสอบ ทไม านเก ฑ 1 0.66 - 1.52

0.75 - 1.40

0.63 - 1.80

0.66 - 1.40

44, 82

2 -

3 3, 51, 53, 54, 77, 89, 92, 93, 96 และ 103

4 -

2. ลการพฒนาคลงขอสอบแบบหลายขนตอนส าหรบวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม

การพฒนาคลงขอสอบแบบหลายขนตอนเปนการน าขอสอบทผานการวเคราะหคณภาพรายขอแบบพหมตจากแบบวดทง 4 ฉบบ มาจดกลมแยกเปนโมดลตามระดบความยากงายของขอสอบ ซงแบงโมดลออกเปน 3 ระดบ ดงน โมดลระดบงาย (-3 b -1) ระดบปานกลาง (-1 b 1) และระดบยาก (1 b

3) โดยไดขอสอบทมคณภาพจ านวน 397 ขอ แบงเปนมตความรวชาชพคร 234 ขอ และมตความรวชาชพชางพนฐานอตสาหกรรม 163 ขอ

2.1 คลงขอสอบมตความรวชาชพคร

ผลการจดท าคลงขอสอบมตความรวชาชพครจ าแนกตามโมดล โดยในแตละโมดลจะเรยงขอสอบตามคาความยากจากนอยไปหามาก ซงขอสอบสวนใหญของแบบวดทง 4 ฉบบ จะมคาความยากอยในโมดลระดบปานกลางจ านวนมากทสด สวนโมดลระดบงายและระดบยากมจ านวนพอ ๆ กน เมอจ าแนกขอสอบตามตวชวด ดงน 1) ความเปนคร คณธรรมจรยธรรม และจรรยาบรรณ มขอสอบในโมดลระดบปานกลาง 16 ขอ ระดบงาย 12 ขอ และระดบยาก 5 ขอ 2) ปรชญาการศกษา ภาษาและวฒนธรรม มขอสอบในโมดลระดบปานกลาง 22 ขอ ระดบงาย 7 ขอ และระดบยาก 5 ขอ 3) จตวทยาส าหรบคร มขอสอบในโมดลระดบปานกลาง 19 ขอ ระดบยาก 8 ขอ และระดบงาย 6 ขอ 4) หลกสตร การจดการเรยนรและการจดการชนเรยน มขอสอบในโมดลระดบปานกลาง 23 ขอ ระดบงายและระดบยากมจ านวนเทากนคอโมดลละ 6 ขอ 5) การวจยเพอพฒนาการเรยนร มขอสอบในโมดลระดบปานกลาง 22 ขอ ระดบยาก 7 ขอ และระดบงาย 4 ขอ 6) นวตกรรมและเทคโนโลยสารสนเทศทางการศกษามขอสอบในโมดลระดบปานกลาง 22 ขอ ระดบยาก 8 ขอ และระดบงาย 2 ขอ และ 7) การวดและประเมนผลการเรยนร และการประกนคณภาพการศกษา มขอสอบในโมดลระดบปานกลาง 24 ขอ ระดบงายและระดบยากเทากนคอโมดลละ 5 ขอ โดยสรปในภาพรวมมตนมขอสอบ 234 ขอ แบงเปนขอสอบในโมดลระดบงาย 42 ขอ ระดบปานกลาง 148 ขอ และระดบยาก 44 ขอ ดงแสดงในตารางท 4

Page 12: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

วารสารวทยาลยดสตธาน ปท 12 ฉบบท 3 เดอนกนยายน - ธนวาคม 2561

การพฒนาคลงขอสอบแบบหลายขนตอนเพอวดสมรรถนะดานความรวชาชพพหมตของนกศกษาครชางอตสาหกรรม 611

2.2 คลงขอสอบมตความรวชาชพพน านชางอตสาหกรรม

ผลการจดท าคลงขอสอบมตความรวชาชพพนฐานชางอตสาหกรรม จ าแนกตามโมดล แยกตามตวชวด ดงน 1) ความรเกยวกบงานอาชพ มขอสอบในโมดลระดบปานกลาง 23 ขอ ระดบงาย 8 ขอ และระดบยาก 2 ขอ 2) คอมพวเตอรและสารสนเทศเพองานอาชพ มขอสอบในโมดลระดบปานกลาง 21 ขอ ระดบงาย 10 ขอ และระดบยาก 1 ขอ 3) เขยนแบบเทคนคเบองตน มขอสอบในโมดลระดบปานกลาง 17 ขอ ระดบยาก 12 ขอ และระดบงาย 2 ขอ 4) วสดงานชางอตสาหกรรม มขอสอบในโมดลระดบปานกลาง 23 ขอ ระดบยาก 9 ขอ และระดบงาย 1 ขอ และ 5) งานฝกฝมอ มขอสอบในโมดลระดบปานกลาง 23 ขอ ระดบงาย 7 ขอ และระดบยาก 4 ขอ โดยสรปในภาพรวมมตนมขอสอบ 163 ขอ แบงเปนโมดลระดบงาย 28 ขอ ระดบปานกลาง 107 ขอ และระดบยาก 28 ขอ ดงแสดงในตารางท 4

ตารางท 4 คลงขอสอบแบบหลายขนตอนเพอวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม

ตวชวด

ระดบ มดล

รวม งาย

-3 b-1 ปานกลาง

-1 b 1 ยาก

1 b 3 มตความรวชาชพคร 1. ความเปนครคณธรรมจรยธรรม และจรรยาบรรณ 12 16 5 33

2. ปรชญาการศกษา ภาษาและวฒนธรรม 7 22 5 34

3. จตวทยาส าหรบคร 6 19 8 33

4. หลกสตร การจดการเรยนรและการจดการชนเรยน 6 23 6 35

5. การวจยเพอพฒนาการเรยนร 4 22 7 33

6. นวตกรรมและเทคโนโลยสารสนเทศทางการ ศกษา 2 22 8 32

7. การวดและประเมนผลการเรยนร และการประกนคณภาพการศกษา

5 24 5 34

รวม 42 148 44 234

มตความรวชาชพพนฐานชางอตสาหกรรม

1. ความรเกยวกบงานอาชพ 8 23 2 33

2. คอมพวเตอรและสารสนเทศเพองานอาชพ 10 21 1 32

3. เขยนแบบเทคนคเบองตน 2 17 12 31

4. วสดงานชางอตสาหกรรม 1 23 9 33

5. งานฝกฝมอ 7 23 4 34

รวม 28 107 28 163

Page 13: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

Dusit Thani College Journal Vol.12 No.3 September - December 2018

Development of Multi-stage Test Item Bank for Measuring Multidimensional Knowledge Competency of Vocational Technical Teacher Students 612

อภปราย ล

1. คณภาพของแบบวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรมทผวจยไดสรางและทดสอบกบนกศกษาหลกสตรครศาสตรอตสาหกรรมบณฑตทวประเทศ ทง 4 ภมภาค จ านวน 936 คน โดยใชแบบวดทงสนจ านวน 4 ฉบบ ทสรางแบบเทาเทยมกน (Equivalent Test) ฉบบละ 120 ขอ เมอตรวจสอบคณภาพของแบบวดแลวยงพบวา มประเดนทนาสนใจในเรองของความตรงเชงโครงสรางแบบพหมต ซงใชวธการประเมนเพอเปรยบเทยบโมเดล (Competing Models) ระหวางโมเดลแบบพหมต โมเดลแบบเอกมตแยกตามมต และโมเดลแบบเอกมต โดยพจารณาจากความสอดคลองกลมกลนของโมเดลกบขอมลเชงประจกษ ดวยคาสถตความสอดคลอง (Item Fit Statistics) ตาง ๆ ไดแก คาสถตดเวยนซ (Deviance

Statistic: G2) และคาสารสนเทศเอไคค (Akaike Information Criterion: AIC) (Akaike, 1974) ซงพบวาคาสถตทแสดงความสอดคลองตาง ๆ ทกลาวมาขางตนของแบบวดทง 4 ฉบบ ในโมเดลแบบพหมตมคานอยทสดเมอเทยบกบโมเดลอน ๆ รวมทงเมอทดสอบนยส าคญของความแตกตางของคา G2 กพบวา มความแตกตางอยางมนยส าคญทางสถตทระดบ .05 ทกฉบบ ดงนนจงกลาวไดวา แบบวดสมรรถนะความรวชาชพครชางอตสาหกรรมทง 4 ฉบบ มความตรงเชงโครงสรางแบบพหมต สอดคลองกบสกญญา ทองนาค (2556) ทไดพฒนาแบบวดสมรรถนะนกศกษาตามมาตรฐานวชาชพครแบบพหมตทมการตรวจใหคะแนนแบบพหวภาค และเมอตรวจสอบความตรงเชงโครงสรางของแบบวดดงกลาวกพบวามความตรงเชงโครงสรางแบบพหมตเชนเดยวกน นอกจากน Briggs & Wilson (2003) ยงกลาววาในสถานการณของการวดและประเมนสงตาง ๆ นน สวนใหญการวดและประเมนมกจะเปนการวดแบบเอกมต โดยรายงานผลการประเมนจะแยกทละมตออกจากกนเปนสวน ๆ คนละเรอง ดงเชนการวจยประเมนสมรรถนะของครอาชวศกษาตาง ๆ ทมการวดแบบเอกมตเชนเดยวกนกบของ Diep, P.C. & Hartmann, M. (2016); Oluwasola. A. J. (2014); Osera et al. (2009) and Robertson, I. (2008) ซงงานวจยเหลานนตรงขามกบการวจยนท เปนการวดสมรรถนะแบบพหมตซงสอดคลองกบธรรมชาตของสงทจะวดมากกวาเนองจากธรรมชาตของสมรรถนะนนจะเปนคณลกษณะทผสมผสานทกษะหรอความรมากกวาหนงอยางขนไปรวมกน

2. คณภาพดานความเทยงแบบพหมต (EAP Reliability) ซงเปนการประยกตคาความเทยงของแบบวดตามทฤษฎการตอบสนองขอสอบใหมรปแบบทคลายกบความเทยงตามทฤษฎการทดสอบแบบดงเดม ดงนนในการพจารณาคาความเทยงจงใชเกณฑเดยวกนกบการแปลความหมายคาความเทยงแบบดงเดมได ส าหรบในการวจยครงน พบวา ในมตความรวชาชพครนน แบบวดทง 4 ฉบบมคาความเทยงอย ระหวาง .755 ถง .835 สวนมตความรวชาชพพนฐานชางอตสาหกรรมมคาความเทยงอยระหวาง .694 ถง .815 ในการพจารณาคาความเทยงของแบบวดทยอมรบไดนน Nunnally และ Bernstein (1994); Hair และคนอน ๆ (2010) เสนอแนะคาความเทยงทยอมรบไดควรมคาตงแต .700 ขนไป จะเหนไดวาคาความเทยงของแบบวดทง 4 ฉบบในมตความรวชาชพครมคาอยในเกณฑทยอมรบไดทกฉบบ สวนมตความรวชาชพพนฐานชางอตสาหกรรมนนกอยในเกณฑทยอมรบได 2 ฉบบ ยกเวนแบบวดฉบบท 2 และ 4 ทมคาความเทยง .696 และ .694 ตามล าดบ

Page 14: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

วารสารวทยาลยดสตธาน ปท 12 ฉบบท 3 เดอนกนยายน - ธนวาคม 2561

การพฒนาคลงขอสอบแบบหลายขนตอนเพอวดสมรรถนะดานความรวชาชพพหมตของนกศกษาครชางอตสาหกรรม 613

แตเมอพจารณาแลวจะเหนวามคาใกลเคยงกบ .700 มาก ดงนนจงกลาวไดวาแบบวดทง 4 ฉบบ มคณภาพดานความเทยงอยในเกณฑทยอมรบไดทง 2 มตทกฉบบ

3. คณภาพของขอสอบรายขอทบรรจในคลงขอสอบนนเปนการวเคราะหความเหมาะสมของขอสอบรายขอตามทฤษฎการตอบสนองขอสอบแบบพหมต โดยใชดชนวดความเหมาะสมของขอสอบรายขอ 2 คา คอ OUTFIT MNSQ และ INFIT MNSQ พบวา ขอสอบรายขอของแบบวดทง 4 ฉบบ มคณภาพอยในเกณฑเปนสวนใหญ ยกเวนขอสอบของแบบวดฉบบท 2 จ านวน 2 ขอ และแบบวดฉบบท 3 จ านวน 10 ขอ ทไมอยในเกณฑดงกลาว แตเมอพจารณาแลวจะเหนวาขอสอบสวนใหญมความเหมาะสมกบโครงสรางการวดหรอเหมาะสมกบโมเดลการวดแบบพหมต และเมอดผลการจดท าคลงขอสอบแบบหลายขนตอน เพอวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรมครงน ผวจยไดพฒนาคลงขอสอบหลายสวนตามมตในการวดสมรรถนะ ซงประกอบดวยมตความรวชาชพคร และมตความรวชาชพพนฐานชางอตสาหกรรม ซงในแตละมตนนยงมตวชวดยอย ๆ อกรวมทงสน 12 ตวชวด และเมอน าขอสอบทผานการวเคราะหคณภาพแลวมาจดท าคลงขอสอบแบบหลายขนตอน จะถกออกแบบตามระดบความยากของขอสอบ โดยแบงออกเปน 3 ระดบ ไดแก โมดลระดบงาย (-3 b-1) ระดบปานกลาง (-1 b 1)และระดบยาก (1 b 3) ดงนนจะไดขอสอบในคลงซงแบงออกเปน 3 คลงยอย ๆ (โมดล) แตในการพฒนาคลงขอสอบทดเหมาะสม หรอในอดมคตนน คลงขอสอบทดควรมลกษณะหรอจ านวนขอสอบเทากนหรอใกลเคยงกนในแตละโมดล แตจะเหนไดวาในคลงขอสอบทพฒนาขนครงน ขอสอบสวนใหญจะมคาความยากอยในระดบปานกลาง โดยทขอสอบระดบงายและระดบยากมจ านวนนอย ซงสอดคลองกบลกษณะการแจกแจงแบบโคงปกต อยางไรกตามการพฒนาคลงขอสอบครงนเปนการพฒนาในระยะแรก ดงนนจงสามารถทจะพฒนาคลงขอสอบเพมเตมไดในระยะถดไป เพอใหไดขอสอบทบรรจในคลงอยางเหมาะสมเทาเทยมกนในทกโมดล

ขอเสนอแนะ ขอเสนอแนะเพอการน า ลวจยไปใชประ ยชน

ควรน าคลงขอสอบน ไปใชส าหรบทดสอบเพอวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรม โดยน าไปใชกบนกศกษาหลกสตรครศาสตรอตสาหกรรมในชนปท 4 หรอ 5 ทก าลงจะฝกประสบการณวชาชพ หรอหลงจากฝกประสบการณวชาชพแลว เพอใหนกศกษาไดประเมนสมรรถนะของตนเองวามความสามารถอยในระดบใด ยงขาดความรในเรองใดบาง ขอเสนอแนะเพอการวจยครงตอไป

1. ควรศกษาเพมเตมเรองการปรบเทยบคะแนนทไดจากแบบวดในแตละฉบบ เชน วธอควเปอรเซนไตล วธเชงเสนตรง วธสมการถดถอย เปนตน เพอใหผลการวดระหวางขอสอบคนละฉบบมความเทาเทยมกนอยางแทจรง

2. ควรวจยเพมเตมเรองการพฒนาคลงขอสอบวดสมรรถนะความรวชาชพพหมตของครชางอตสาหกรรมในโมเดลการวดทเปนโมเดลการตอบสนองขอสอบแบบพหมตภายในขอสอบ (Within-Items

Page 15: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

Dusit Thani College Journal Vol.12 No.3 September - December 2018

Development of Multi-stage Test Item Bank for Measuring Multidimensional Knowledge Competency of Vocational Technical Teacher Students 614

MIRT Model) รวมทงพฒนาคลงขอสอบวดสมรรถนะความรวชาชพในสาขาวชาเฉพาะทาง เชน ชางไฟฟา ชางกลโรงงาน ชางอเลกทรอนกส เปนตน

กตตกรรมประกาศ

งานวจยนไดรบสนบสนนทน 90 ป จฬาลงกรณมหาวทยาลย กองทนรชดาภเษกสมโภช

References Arphaadul, A., Poolkrajang, A. & Siriphan, R. (2011). The vocational teachers’ professional

standard. The Secretariat of The Teachers Council of Thailand: Thailand. Briggs, D. C., and Wilson, M. (2003). An introduction to multidimensional measurement

using Rasch models. Journal of Applied Measurement, 4(1), 87-100. Brossman, B.G. and Guille, R.A. (2014). A comparison of multi-stage and linear test designs

for medium-size licensure and certification examinations. Journal of Computerized

Adaptive Testing, 2(2), 18-36. Diep, P.C. & Hartmann, M. (2016). Green Skills in Vocational Teacher Education - a model

of pedagogical competence for a world of sustainable development. In: TVET@Asia, issue 6, 1-19.

Hair, J.F., Black, W.C., Babin, B.J., Anderson, R.E., and Tatham, R.L. (2010). Multivariate Data

Analysis. 7th ed. New Jersey: Pearson Education. Kanjanawasee, S. (2012). Modern Test Theories. 4. Bangkok: Chulalongkron University Press. Lunz, M., Wright, B. D., & Linacre, J. M. (1990). Measuring the impact of judge severity on

examination scores. Applied Measurement in Education, 3, 331-345. Nunnally, J.C., and Bernstein, I.H. (1994). Psychometric theory. 3rd ed. New York:

McGraw-Hill

Office of Vocational Education Commission. (2013). Vocational Certificate Curriculum 2013. Bangkok: Ministry of Education.

Oluwasola. A. J. (2014). Professional competence of technical teachers: A factor analysis

of the training needs of technical college teachers. American Journal of Science

and Technology. 2(1), 22-26. Osera, F., Salzmannb, P., and Heinzerc, S. (2009). Measuring the competence-quality of

vocational teachers: An advocatory approach. Empirical Research in Vocational

Education and Training, 65-83.

Page 16: Development of Multi stage Test Item Bank for Measuring ... · Dusit Thani College Journal Vol.12༛No.3༛༛September - December 2018 602 Development of Multi-stage Test Item Bank༛for

วารสารวทยาลยดสตธาน ปท 12 ฉบบท 3 เดอนกนยายน - ธนวาคม 2561

การพฒนาคลงขอสอบแบบหลายขนตอนเพอวดสมรรถนะดานความรวชาชพพหมตของนกศกษาครชางอตสาหกรรม 615

Royal Gazette. (2013). Regulations of the Teachers Council on Professional Standards. Vol. 130. Special part 130.67.

Robertson, I. (2008). VET Teachers’ Knowledge and Expertise. International Journal of Training

Research. 6(1), 1-22. Thongnak, S. (2013). Development of a Competency Test for Student Teachers Based on

Teaching Professional Standards Using Polytomously Scored Item. SDU Research

Journal. 9(1), 169-187. Wu, M., Adams, R., Wilson, M., & Haldane, S. (2007). ACER ConQuest version 2.0:

Generalized item response modeling software [Computer software and manual]. Camberwell: ACER Press.

Zenisky, A., Hambleton, R.K., and Luecht, R.M. (2010). Multistage testing: issues, designs,

and research. in W. J. van der Linden & C. A. W. Class (Eds.), Elements of adaptive

testing (pp. 77-101). New York, NY: Springer.

Sukanya Boonsri, Ph.D. Student in Educational Measurement and

Evaluation, Department of Educational Research and Psychology,

Faculty of Education, Chulalongkorn University.

Associate Professor, Kamonwan Tangdhanakanond, Ph.D., Department of Educational Research and Psychology,

Faculty of Education, Chulalongkorn University.

Professor, Sirichai Kanjanawasee, Ph.D., Department of

Educational Research and Psychology, Faculty of Education,

Chulalongkorn University.