Amazon สั่งวิศวกรยุติ Tokenmaxxing ตัดสินเครื่องมือ AI จากผลงานที่ส่งมอบ

Amazon กำลังแจ้งให้ทีมวิศวกรรมของตนยุติการใช้ Agent เพื่อเพิ่มจำนวน Token ในการแข่งขัน AI leaderboard ภายใน ซึ่งเป็นสิ่งที่พวกเขาได้สั่งให้ยุติไปแล้ว

Amazon ระบุว่าการประเมินเครื่องมือ AI ควรพิจารณาจากซอฟต์แวร์ที่ช่วยในการส่งมอบผลลัพธ์ได้จริง ไม่ใช่การวัดจากปริมาณการใช้ Token หรือการเปลี่ยนแปลงโค้ดที่เกิดขึ้น

พวกเขาเชื่อว่าการวัดผลควรมาจากผลลัพธ์ในระยะยาว ซึ่งสอดคล้องกับการที่ Amazon ยังคงใช้ข้อมูลการใช้งานอยู่ แต่ให้พิจารณาร่วมกับตัวชี้วัดอื่น ๆ

ศัพท์ที่ควรรู้

  • Tokenmaxxing – การใช้ Agent เพื่อเพิ่มจำนวน Token ให้สูงเกินจริงในการแข่งขันภายใน
  • AI leaderboard – กระดานจัดอันดับที่ใช้ในการแข่งขันระหว่างเครื่องมือ AI ภายใน
  • Agent – โปรแกรมอัตโนมัติที่ถูกใช้ในการปั่นตัวเลขการใช้งาน

ที่มา: TechSpot

Leave a Comment