OpenAI ได้ทำการปรับแต่ง GPT-3 เพื่อให้สามารถตอบคำถามปลายเปิดได้อย่างแม่นยำยิ่งขึ้น โดยการสอนให้โมเดลใช้เว็บเบราว์เซอร์แบบข้อความในการค้นหาข้อมูลจากโลกแห่งความเป็นจริง
โมเดลภาษาอย่าง GPT-3 มีประโยชน์หลากหลาย แต่มีแนวโน้มที่จะสร้างข้อมูลที่ไม่เป็นจริง หรือที่เรียกว่า “hallucinate” เมื่อต้องทำงานที่ต้องอาศัยความรู้เฉพาะทางในโลกจริง การนำเว็บเบราว์เซอร์เข้ามาช่วยจึงเป็นแนวทางแก้ไขปัญหานี้
ในการประเมิน เราได้ใช้ TruthfulQA ซึ่งเป็นชุดข้อมูลที่สร้างขึ้นเพื่อทดสอบว่าโมเดลจะตกหลุมในความเข้าใจผิดทั่วไปหรือไม่ โดยมีการให้คะแนนทั้งความจริงและความครอบคลุมของคำตอบ
สภาพแวดล้อมการท่องเว็บของเราไม่ได้ให้การเข้าถึงเว็บแบบเต็มรูปแบบ แต่ช่วยให้โมเดลสามารถส่งคำค้นหาไปยัง Microsoft Bing Web Search API และติดตามลิงก์ที่มีอยู่บนเว็บได้
ศัพท์ที่ควรรู้
- GPT-3 – โมเดลภาษาขนาดใหญ่ที่ OpenAI ได้นำมาใช้เป็นพื้นฐานในการปรับปรุงนี้
- Hallucinate – คือการที่โมเดลสร้างข้อมูลที่ไม่เป็นความจริงขึ้นมาเองเมื่อตอบคำถาม
- TruthfulQA – ชุดข้อมูลที่ออกแบบมาเพื่อทดสอบความสามารถของโมเดลในการหลีกเลี่ยงความเข้าใจผิด
- Microsoft Bing Web Search API – เครื่องมือที่โมเดลใช้ในการส่งคำค้นหาไปยังอินเทอร์เน็ตเพื่อหาข้อมูลอ้างอิง
ที่มา: OpenAI