การทดลองนี้ไม่ได้ใช้ AI ในการฝึกอบรม แต่เน้นการสอนแนวคิดการให้เหตุผลเชิงสาเหตุผ่านแบบฝึกหัดที่ประกอบด้วยเกม ตัวอย่าง และข้อเสนอแนะ โดยผู้ประเมินที่เป็นมนุษย์จะให้คะแนนจากเกณฑ์ 5 ระดับ ขณะเดียวกัน นักวิจัยยังใช้การวิเคราะห์ข้อความอัตโนมัติเพื่อวัดจำนวนและความหลากหลายของแนวคิด รวมถึงการให้เหตุผลเชิงสาเหตุ
กลุ่มนักเรียนที่เข้าถึง ChatGPT ได้รับคะแนนเฉลี่ยสูงกว่าเกือบเต็มในมาตรวัด 5 ระดับ ในขณะที่การฝึกคิดเชิงวิพากษ์ช่วยให้นักเรียนอธิบายได้ชัดเจนขึ้นว่าแนวคิดของตนเองจะใช้ได้และล้มเหลวได้อย่างไร แต่คะแนนตามเกณฑ์การให้คะแนนแบบดั้งเดิมไม่ได้สูงกว่า
โดยรวมแล้ว กลุ่มนี้แสดงให้เห็นถึงการพัฒนาในมาตรวัดที่กว้างที่สุด การออกแบบการทดลองแบบสุ่มช่วยให้นักวิจัยสามารถแยกผลกระทบของการเข้าถึง ChatGPT และการฝึกคิดเชิงวิพากษ์ออกจากกันได้
ความแตกต่างระหว่างผลกระทบของการฝึกกับสิ่งที่เกณฑ์การให้คะแนนแบบดั้งเดิมจับได้ ชี้ให้เห็นถึงความท้าทายที่ใหญ่กว่าสำหรับสถาบันการศึกษา หาก AI สามารถช่วยให้นักเรียนผลิตงานที่ดูเหมือนผู้เชี่ยวชาญ การดูแค่คำตอบสุดท้ายอาจบอกน้อยลงว่านักเรียนเข้าใจอะไรกันแน่ ซึ่งเป็นสิ่งที่นักการศึกษาหลายคนกำลังเผชิญอยู่
ศัพท์ที่ควรรู้
- ChatGPT – โมเดลภาษาขนาดใหญ่ที่ถูกนำมาใช้ในการทดลองนี้
- Causal reasoning – การให้เหตุผลเชิงสาเหตุ ซึ่งคือการทำความเข้าใจว่าเหตุการณ์หนึ่งนำไปสู่อีกเหตุการณ์ได้อย่างไร
- Rubric – เกณฑ์มาตรฐานที่ใช้ในการประเมินผลงานของนักเรียน
ที่มา: OpenAI