การวัด การสร้างเครื่องมือ และการตรวจสอบคุณภาพเครื่องมือ (3...

การวด และการสรางเครองมอ

ดร.รถยานภศ พละศก

ประเดน

•การวด

•การสรางเครองมอ

หวขอทน าเสนอ

• แนวคดเกยวกบการวด

• ปจจยทมผลตอความคลาดเคลอนจากการวด

• ประเภทของเครองมอทใชวดทางการวจย

• ขนตอนการสรางเครองมอ

วตถประสงคของการเรยนร

ระบปจจยทมผลตอความคลาดเคลอนจากการวดไดถกตอง

อธบายคณสมบตส าคญของเครองมอวจยทมคณภาพซงใช ในงานวจยเชงปรมาณไดถกตอง

สามารถสรางเครองมอวจยทมคณภาพ

5

ผลของการวจย

ด าเนนการท าวจย

(เพอคนหาความจรง)

ค าถามวจย

(สงทตองการค าตอบ)

คาความจรง (True Value)

คาความเทจ (Errors)

Personal Errors Systematic

Errors Random Errors

ผลทไดจากการวจย

•Statistical Conclusion

Validity

Minimization of Error Variance

•External Validity

•Construct Validity

•Internal Validity

แบบแผน

การวจย

สถต

เครองมอ

สมตวอยาง

ขนาดตวอยาง

7

เทคนคการสรางเครองมอ

ชวนคด

จะเกบขอมลอะไร

ภาวะอวนของเยาวชนไทยเปนอยางไร

ตวอยางท 2: ทานตองการใหคนไทยมคณลกษณะใด

คณภาพของเครองมอ

ความตรงหรอความเทยงตรง(Validity)

ความเทยงหรอความเชอมน (Reliability)

อ านาจจ าแนก (Discrimination)

สะดวกในการน าไปใช

คณภาพของเครองมอ

การวด (Measurement)

การก าหนดตวเลขหรอสญลกษณใหกบสงตางๆ โดยเปนไปตามกฎเกณฑท

ก าหนดไว

• การวดทางกายภาพ

• การวดทางสงคมศาสตร

• เครองมอมมาตรฐาน • มหนวยวดทแนนอน • ความคลาดเคลอนนอยมาก

• มความตรง ความเทยง มอ านาจจ าแนก และสะดวกในการน าไปใช

• เครองมอไมมมาตรฐาน • มหนวยวดไมแนนอน • ความคลาดเคลอนมมาก • เพอลดความคลาดเคลอน

จ าตองสรางใหมความตรง ความเทยง มอ านาจจ าแนก และสะดวกในการน าไปใช

การวดทางสงคมศาสตร การวดทางกายภาพ

• วเคราะหตวอยางตอไปน ควรใชเครองมออะไรจงจะเหมาะสมกบวตถประสงค /

• เครองมอทก าหนดเหมาะสมหรอไม? เพราะเหตใด?

กจกรรม

• เพอศกษาระดบความร เจตคต และพฤตกรรมการจดการความเสยงในการประกอบธรกจโ ร ง แ ร ม ใ น อ า เ ภ อ เกาะสมย

จงหวด สราษฎรธาน

• ควรใชเครองมออะไรเ พ อ ใ ห ไ ด ค า ตอบ ทเชอถอได

ตวอยางท 1

(1) เพอศกษาความร ความเขาใจเกยวกบพระราชบญญตแรงงานสมพนธ พ.ศ. 2518

(2) เพอเปรยบเทยบความร ความเขาใจเกยวกบพระราชบญญต แรงงานสมพนธ โดยจ าแนกตามสถานภาพสวนบคคล

(3) เพอหาแนวทางการพฒนาความร ความเขาใจเกยวกบพระราชบญญต แรงงานสมพนธ ของแรงงานไทยในภาคอตสาหกรรมอาหารทะเลแปรรปของจงหวดสราษฎรธาน

• เครองมอทใชในการวจย เปน • 1. แบบสอบถาม เพอตอบค าถาม

วตถประสงคขอ 1 และ 2 • 2. การสมภาษณเจาะลก ใชตอบ

ค าถามวตถประสงคขอ 3

25

ความรความเขาใจเกยวกบพระราชบญญตแรงงานสมพนธ พ.ศ. 2518 ของแรงงานไทยในภาคอตสาหกรรมอาหารทะเล แปรรป

: กรณศกษาจงหวดสราษฎรธาน

1.เพอศกษาระดบการลดภาวะโลกรอนของโรงเรยนสงกดส านกงานเขตพนทการประถมศกษา สราษฎรธาน เขต 1

2.เพอเปรยบเทยบระดบการลดภาวะโลกรอนของโรงเรยนสงกดส านกงานเขตพนทการประถมศกษา สราษฎรธาน เขต 1 จ าแนกตามปจจยสวนบคคล

• การศกษาครงน ใชแบบสอบถามส าหรบการสอบถามความคดเหนของครและผบรหารทมตอการลดภาวะโลกรอนของโรงเรยนฯ

การศกษาการลดภาวะโลกรอนของโรงเรยนสงกดส านกงานเขตพนท การประถมศกษา สราษฎรธาน เขต 1

ขนตอนการสรางเครองมอวจย

1 ระบเปาหมายของสงทตองการวด 2 เลอกเครองมอทจะใชใหสอดคลองกบสงทจะวด 3 ดตวแปรตน ตวแปรตาม มนยามศพทเฉพาะ 4 ก าหนดคณลกษณะจ าแนกเปนดานตางๆ

ขนตอนการสรางเครองมอวจย

5 น าคณลกษณะมาเขยนจ าแนกเปนพฤตกรรมท แสดงออกซงวดได และสรางเปนขอค าถามใสขอ

6 ค าถามลงในเครองมอ หาคณภาพเครองมอโดยใหผเชยวชาญตรวจสอบ

7 ความเทยงตรงเชงเนอหา น ามาปรบปรงแกไข

ขนตอนการสรางเครองมอวจย (ตอ)

8 น าเครองมอไปทดลองใชกบกลมอนทมลกษณะเหมอนกลมเปาหมาย

9 น าผลการทดลองวเคราะหหาคณภาพและปรบปรงแกไขจนคณภาพเปนทยอมรบ

10 สรางเกณฑการแปลความหมายของคะแนน จดพมพเครองมอฉบบสมบรณตอไป

ขนตอนการสรางเครองมอวจย (ตอ)

• เครองมอวดความร

• เครองมอวดความรสก

• เครองมอวดทกษะหรอวดพฤตกรรม

ประเภทของเครองมอ

แบบทดสอบ

แบบยอย (องเกณฑ)

แบบรวม (องกลม)

ปรนย อตนย

ปรนย อตนย

เครองมอวดดานความร

• เปนขอสอบยอย เพอตรวจสอบวา เมอไดศกษาแตละเนอหายอย ๆ แลวมความรเพยงพอหรอไม หรอผานเกณฑทก าหนดหรอไม เมอเทยบกบระดบเกณฑทก าหนด

แบบทดสอบยอย(องเกณฑ)

• เปนขอสอบรวม เพอตรวจสอบวา เมอไดศกษาในเนอหาทงหมดแลวมระดบผลสมฤทธมากนอยเพยงใดเมอเทยบกบคนอน ๆในกลมเดยวกน

แบบทดสอบยอย(องกลม)

• เปนขอสอบทมขอค าถาม แลวมตวเลอกใหเลอกตอบ

• แบงเปน ถก-ผด เตมค า จบค เลอกตอบ

แบบทดสอบแบบปรนย

• เปนขอสอบทมขอค าถามและใหตอบอยางอสระตามประเดนทค าถามถาม

แบบทดสอบแบบอตนย

ก าหนดวตถประสงคของการศกษา ยอย(องเกณฑ) /รวม(องกลม)

วเคราะหเนอหา/จดประสงคการเรยนร

ก าหนดรปแบบของแบบทดสอบ ปรนย/อตนย

ความรความจ า ความเขาใจ

การน าไปใช การวเคราะห

การสงเคราะห การประเมนคา

ตรวจความสอดคลองของขอค าถามกบจดประสงคการเรยนร (IOC)

หาคณภาพใชโปรแกรมส าเรจรป องเกณฑ p r rcc

องกลม p r rtt

ขนตอนการสรางแบบทดสอบ

แบบทดสอบ

ชดของขอค ำถำม/ เงอนไข/ สถำนกำรณ

กลมตวอยำงแสดงควำมร ควำมเขำใจ ในเนอหำ ทผวจยตองกำรศกษำ

แบบทดสอบปรนย แบบทดสอบอตนย

เตมค ำ ถก – ผด จบค

เลอกตอบ

มค ำตอบถกหลำยค ำตอบ เนนควำมร ควำมเขำใจควำมคดชนสง

ความรเรองไขเลอดออกของนกเรยนชนประถมปท 6 ของโรงเรยนในเขตพนทการศกษาท 1

จ.นครศรธรรมราช

ค าถามการวจย

ผลของโปรแกรมกำรใหควำมรเรองไขเลอดออกเปนอยำงไร วตถประสงคการวจย

1. เพอศกษาระดบความรเรองโรคไขเลอดออกของนกเรยนชนประถมปท 6 ของโรงเรยนในเขตพนทการศกษาท 1 จ.นครศรธรรมราช

2. เพอศกษาความแตกตางของระดบความรเรองโรคไขเลอดออกของนกเรยนชนประถม ปท 6 ของโรงเรยนในเขตพนทการศกษาท 1 จ.นครศรธรรมราช กอนและหลงการใช โปรแกรมการใหความร

แบบทดสอบแบบเตมค า

แบบทดสอบแบบจบค

การสรางแบบทดสอบ สามารถศกษาดตวอยางและเลยนแบบไดจากหนงสอ ทเกยวกบการสรางแบบทดสอบทวไป

เ ปนพฤ ตกรรม เ ก ยวกบสภาพอารมณความรสก เจตคต คานยม ความคดเหน ความพงพอใจ และบคลกภาพ การเปลยนแปลงของจตใจเรมจาก การรบร เตมใจยอมรบ รคณคา จดระบบคณคา และแสดง ประพฤตปฏบตตาม (Krathwohl,1964)

ความรสกหรอจตพสย ( Affective Domain )

แบบสอบถาม (Questionnaire) แบบสมภาษณ (Interview Form) แบบสงเกต (Observation)

เครองมอวดความรสก/จตพสย

เปนชดค าถามใชวดหรอความคดเหน ทศนคต ของผใหขอมล ผใหขอมลจะเปนผตอบค าถามดวยตนเอง

แบบสอบถาม (Questionnaire)

แบบสอบถามปลายปด (Close-Ended Form) เปนแบบสอบถามทก าหนดตวเลอกแนนอนในขอค าถาม

ค าชแจง โปรดท าเครองหมาย ลงในชองวางหนาขอความทตรงกบความจรง 1 เพศ 1) ชาย 2) หญง 2 การศกษาสงสด 1) ประถมศกษาปท 6 2) มธยมศกษาปท6 3) อนปรญญา 4) ปรญญาตร 5) สงกวาปรญญาตร

ตวอยางแบบเลอกตอบ

52

วชาททานชอบเรยนคอ ........................................................................... ผลงานการเรยนทภาคภมใจคอ ..............................................................

ตวอยางแบบตอบสน

เมอมเวลาวาง ทานมกท ากจกรรมอะไร ใหใสตวเลขเรยงจากมากไปหานอย อานหนงสอ ท างานบาน ไปเทยวนอกบาน ชวยงานสาธารณะ

ตวอยางแบบจดล าดบ

53

รายการ ระดบความคดเหน

มากทสด(5)

มาก (4)

ปานกลาง (3)

นอย (2)

นอยทสด(1)

1 การจดการเรยนเหมาะกบนกเรยน 2 สอการสอนนาสนใจ 3 หองเรยนมความสะดวกสบาย 4 อปกรณเทคโนโลยพรอมใชงาน

จงใสเครองหมาย ใหตรงกบความคดเหนของทาน

ตวอยางแบบมาตราสวนประมาณคา

08/01/59 54

ตวอยางค าถามของแบบสอบถามปลายเปด 1 โปรดแสดงความคดเหนเกยวกบการจดรปแบบองคกรใหม ................................................................................................. 2 การจดรปแบบองคใหมมผลตอการท างานของทานอยางไร .................................................................................................

แบบสอบถามปลายเปด (Open-Ended Form) เปนแบบสอบถามทมขอค าถามเปดกวางใหผตอบไดแสดงความคดเหนของตนเอง

เปนชดค าถามมลกษณะเปนประเดนส าหรบการสนทนาอยางมจดมงหมายระหวางผสมภาษณและผใหขอมล

แบบสมภาษณ (Interview Form)

แบบสมภาษณทมโครงสราง (Structured Interview Form)

เปนแบบสมภาษณทมขอค าถามส าหรบการสนทนาถกก าหนดขนอยางเปนขนตอน เรยงหวขอค าถามตอเนอง

ตวอยางขอค าถามของแบบสมภาษณทมโครงสราง 1 นกเรยนชอบเรยนคณตศาสตรหรอไม 2 เหตผลอะไรทท าใหรสกตอการเรยนคณตศาสตรอยางนน 3 นกเรยนคดวาถาจะเรยนคณตศาสตรใหดขนตองท าอยางไร

เปนแบบสมภาษณทมขอค าถามใชเปนแนวทางการสมภาษณ ไมเจาะจงรายละเอยด ไมมกฎตายตว ไมตองเรยงล าดบค าถาม มความยดหยนในการสมภาษณ จบการสมภาษณเมอไดขอมลเพยงพอแลว

แบบสมภาษณทไมมโครงสราง (Non-Structured interview Form)

เครองมอวด ดานพฤตกรรม(ทกษะ)

เครองมอทใชวดดานพฤตกรรม

•การสงเกต ประกอบกบใชแบบบนทกพฤตกรรม

การสงเกต (Observation)

วธการเกบรวบรวมขอมลโดยผสงเกตเฝาสงเกตพฤตกรรมของบคคลหรอกลมเปาหมาย กระท าในชวงเวลา สถานท และสถานการณทก าหนด

การสงเกตแบบไมมสวนรวม (Non-Participant observation) เปนการสงเกตทผสงเกตเฝาตดตามกลมผถกสงเกตหางๆ ในกจกรรมตางๆ ของผถกสงเกต

การสงเกตแบบมสวนรวม (Participant observation) เปนการสงเกตทผสงเกตเขาไปมสวนรวมในกจกรรมตางๆ ของกลมผถกสงเกต

รายการสงเกตพฤตกรรม บอยครง นานๆครง ไมเคย

1 เขาเรยนตรงเวลา

2 ตงใจเรยนตลอดการสอน

3 ท างานตามทไดรบมอบหมาย

4 จดบนทกขณะเรยน

5 ซกถามในหองเรยน

ตวอยางแบบสงเกตพฤตกรรมแบบมาตราสวน ประมาณคา

ขอ รายการ ท า ไมท า

1 เขยนดวยรปแบบการเขยนจดหมาย

2 ใชสรรพนามแทนผเขยนและผรบ

3 เขยนหนาซองจดหมาย

ตวอยางแบบสงเกตพฤตกรรมโดยใชแบบส ารวจรายการ (Checklists)

การแสดงตว

ชอบสงคม

เขากบคนไดงาย

ชอบอยในกลมคน

กลาแสดงออก

ชอบแสดงความคดเหน

เปนคนเปดเผย

กระฉบกระเฉง

เคลอนไหวคลองตว

ตนตวตลอดเวลา

ระดบแบบ ระดบคณลกษณะ

ระดบพฤตกรรมแสดงออก

ระดบสงเกตเหน

ตวอยางการสรางขอค าถามของการแสดงตว

การแสดงตว

ชอบสงคม

เขากบคนไดงาย

ชอบอยในกลมคน

ทานทกทายคนไมเคยรจกกอนเสมอ

ทานเปนทยอมรบของคนทวไป

ทานรสกเหงาเมออยตามล าพง

ทานชอบไปงานสงสรรคทมคนมากมาย

กลาแสดงออก

ชอบแสดงความคดเหน

เปนคนเปดเผย

ทานชอบแสดงความคดเหนเมอมโอกาส

ทานตองการมสวนรวมในการท างานกลม

ทานมกสนทนาอยางตรงไปตรงมา

ทานยดถอการใหขอมลทเปนจรง

กระฉบกระเฉง

เคลอนไหวคลองตว

ตนตวตลอดเวลา

ทานท างานส าเรจในเวลารวดเรว

คนอนๆมกบอกวาทานเปนคนฉบไว

ทานท างานดวยความมนใจ

ทานรสกกระปรกระเปราเสมอ

ระดบแบบ ระดบคณลกษณะ ระดบพฤตกรรมแสดงออก ระดบสงเกตเหน

ตวอยางการสรางขอค าถามของการแสดงตว

ตวอยาง แบบประเมนพฤตกรรมการแสดงตว ทมลกษณะเปนแบบมาตราสวนประมาณคา (Rating scale)

พฤตกรรม ระดบคาคะแนนของพฤตกรรมทสงเกต

ม บอย

มาก (5)

ม บอย (4)

ม ปาน กลาง (3)

ม นอย (2)

ม นอยมาก (1)

1. ทานทกทายคนไมเคยรจกกอนเสมอ

2. ทานเปนทยอมรบของคนทวไป

3. ทานรสกเหงาเมออยตามล าพง

4. ทานชอบไปงานสงสรรคทมคนมากมาย

5.ทานชอบแสดงความคดเหนเมอมโอกาส

6 …………………….

7 ……………………..

รวมคะแนน

ตวอยาง

ตวอยาง แบบประเมนพฤตกรรมการแสดงตว ทมลกษณะเปนแบบตรวจสอบรายการ (Checklist)

พฤตกรรม ใช ไมใช

1. นกเรยนทกทายคนไมเคยรจกกอนเสมอ

2.นกเรยนเปนทยอมรบของคนทวไป

3.นกเรยนรสกเหงาเมออยตามล าพง

4.นกเรยนชอบไปงานสงสรรคทมคนมากมาย

5.นกเรยนชอบแสดงความคดเหนเมอมโอกาส

6 ………………………………….

7 ………………………………….

รวมคะแนน

ตวอยาง

หลกการทพงระวงในการสรางแบบสอบถาม

สอดคลองกบวตถประสงคของการวจย ใชภาษาทเขาใจงาย เหมาะสมกบผตอบ ใชขอความทส นกะทดรดไดใจความ แตละขอคาถาม ควรมนยเพยงประเดนเดยว หลกเลยงการใชประโยคปฏเสธซอน

หลกการทพงระวงในการสรางแบบสอบถาม (ตอ)

ไมควรใชคายอ ไมชนาคาตอบใหเปนไปในแนวทางแนวทางหนง หลกเลยงคาถามทผตอบลาบากใจทจะตอบ คาตอบทใหเลอกตอบตองชดเจน และครอบคลมสงทเปนไปได หลกเลยงคาทส อความหมายไดหลายอยาง

การประเมนทางเลอกในการพฒนาเครองมอ

Q & A

Thank you for your attention

คณภาพเครองมอ

ผศ.ดร. เกศรน มนญผล

หวขอ

• การตรวจสอบคณภาพของเครองมอวจยกอนน าไปใชจรง

วตถประสงคของการเรยนร

สามารถอธบายวธตรวจสอบคณภาพความตรงตามเนอหาและ ความเทยงของเครองมอวจย

สามารถวเคราะหคาความเทยงโดยใชโปรแกรมส าเรจรป ทางสถตและแปลผลไดถกตอง

อ านาจจ าแนก (Discrimination)

ความตรง/ความเทยงตรง (Validity)

ความเทยง/ความเชอมน (Reliability)

การหาคณภาพเครองมอ

78

การหาความเทยงตรงเชงเนอหารายขอ

IOC = R N

IOC แทน ดชนความสอดคลองระหวางขอค าถามกบค านยามศพท/แนวคดทฤษฎทเกยวของ (Index of Congruence) R แทน ความคดเหนของผเชยวชาญ R แทน ผลรวมคะแนนความคดเหนของผเชยวชาญ N แทน จ านวนผเชยวชาญ

79

IOC >.50

ความเทยงตรงเชงเนอหารายขอ (content validity of individual items : I-CVI)

I-CVI = Ni / N เมอ Ni แทน จ านวนผเชยวชาญทประเมนขอค าถามในระดบสอดคลอง N แทน จ านวนผเชยวชาญทงหมด

(Polit & Beck, 2006)

หาไดจากจ านวนผเชยวชาญทประเมนขอความในระดบความสอดคลอง (แบบประเมนมระดบ ไมสอดคลอง(-1) ไมแนใจ(0) สอดคลอง(+1) ) หารดวยจ านวนผเชยวชาญทงหมด ผเชยวชาญ 6 คนขนไปเกณฑ CVI เทากบ 0.80

80

ความเทยงตรงเชงเนอหาทงฉบบ (content validity of the overall scale : S -CVI)

S-CVI/Ave เปนการหาคาเฉลยของ I-CVI ทงฉบบ

81

ความเทยงตรงเชงเนอหาทงฉบบ (content validity of the overall scale : S -CVI)

S-CVI/UA เปนการหาสดสวนของขอค าถามทผานการประเมนจากแบบประเมนมระดบ ไมสอดคลอง(0) สอดคลองคอนขางนอย(1) สอดคลองระดบปานกลาง (2) สอดคลองคอนขางมาก(3) และสอดคลองในระดบมาก(4) (เลอกเฉพาะระดบ 3 หรอ 4) หารดวยขอค าถามทงหมดในชดนน ผเชยวแตละคนตองประเมนไดไมนอยกวา 0.80 82

อ านาจจ าแนก (Discrimination)

ความสามารถของเครองมอทแยกผตอบทมความสามารถแตกตางกนออกจากกนได

คาอ านาจจ าแนก • ม 2 วธ

• วธท 1 หาความสมพนธระหวางคะแนนแตละขอกบคะแนนรวมขออน ๆ ยกเวนขอนน (Item Corrected total Correlation)

• วธท 2 ใชสถต t-test ทดสอบความแตกตางระหวางกลมสงและกลมต า

คาอ านาจจ าแนก

]Y)(Y][NX)(X[N

YXXYN

2222rXY =

X คะแนนของขอทตองกำรหำ Y ผลรวมของคะแนนทงหมดยกเวนขอของคะแนน X N จ ำนวนกลมตวอยำง

สตรนเรยก Total Item Correlation

การเปดตารางคา r ดคาอ านาจจ าแนก

Levels of Significance for a one - tailed test

.05 .025 .01 .005

Levels of Significance for a two - tailed test

df .10 .05 .02 .01 1 2 3 4 5 6 7 8

.988

.900

.805

.729

.669

.622

.582

.549

.997

.950

.878

.811

.754

.707

.666

.632

.9995 .980 .934 .882 .833 .789 .750 .716

.9999 .990 .950 .917 .874 .834 .798 .765

คาอ านาจจ าแนก

วธท 2 ใชสถต t-test ทดสอบความแตกตางระหวางกลมสงและกลมต า

2nndf,2nn

1)S(n1)S(nS,

)n

1

n

1(S

XXt 21

21

2

22

2

112

p

21

2

p

21

ความเทยง/ความเชอมน (Reliability)

ความคงทของคะแนนทไดจากผตอบขอค าถามคนเดยวกนหลายๆ ครงดวยเครองมอชดเดม

วธสมประสทธเอลฟา ( - Coefficient)

= n 1 - Si2

n – 1 St2

แทน คาความเชอมนของชดขอค าถาม n แทน จ านวนขอค าถาม Si

2 แทน ความแปรปรวนของคะแนนแตละขอค าถาม St

2 แทน ความแปรปรวนของคะแนนของขอค าถามทงหมด

89

การวเคราะหหาคณภาพเครองมอ (ความรสก/พฤตกรรม)

• โปรแกรม B-Index

• โปรแกรม SPSS

วธการทใชกบขอมลเชงคณภาพ

• การสงเกต ประกอบแบบบนทกการสงเกต

• การสมภาษณเชงลก

• การสนทนากลม

การสงเกต(Observation)

• การสงเกตแบบมสวนรวม

• การสงเกตแบบไมมสวนรวม

การสมภาษณเชงลก (Indepth Interview)

• ก าหนดประเดนค าถาม

• นดหมายผใหสมภาษณ

• การบนทกการสมภาษณ(บนทกยอหรอใชเครองมอบนทก)

การสนทนากลม(Focus Group)

• 8-12 คน (Homogenous)

• ก าหนดประเดนค าถาม

• นดหมายลวงหนา

• เวลา 2-3 ชวโมง

• มผน าสนทนา

• มผจดบนทก

Q & A

Thank you for your attention