การจัดอันดับคุณภาพใช้วิธีการของ Artificial Analysis โดยอาศัยการโหวตแบบจับคู่ตาบอด (blind pairwise votes) จากผู้ประเมินที่ผ่านการรับรอง โดยเปรียบเทียบคลิปจากพร้อมท์เดียวกัน และใช้บอร์ด AA-Video-T2V v2.1 (พร้อมเสียง) และ AA-Video-I2V v2.1 ในการให้คะแนน
ในส่วนของจุดยึด (Anchor) โมเดล Kling 3.0 1080p (Pro) ถูกกำหนดไว้ที่ 1000 Elo ทั้งสองบอร์ด หากคะแนนต่ำกว่า 1000 หมายถึงผู้โหวตชอบ Kling 3.0 มากกว่า
ด้านราคา Artificial Analysis แสดงต้นทุนต่อนาทีของ API ของแต่ละผู้สร้าง และปรับให้เป็นราคาต่อวินาที โดยมักจะมีการแจ้งเตือนเมื่ออัตราค่าบริการที่ 720p ต่ำกว่า
ศัพท์ที่ควรรู้
- Elo – ระบบการให้คะแนนที่ใช้วัดความสามารถของผู้แข่งขัน โดยในที่นี้คือคุณภาพของวิดีโอที่สร้างโดย AI
- Artificial Analysis – หน่วยงานที่ทำการประเมินคุณภาพของโมเดล AI โดยใช้การโหวตจากมนุษย์
- Open Weights – สถานะของโมเดลที่อนุญาตให้ผู้ใช้เข้าถึงและปรับแต่งน้ำหนัก (weights) ของโมเดลได้
- API price per second – ราคาที่ผู้ใช้ต้องจ่ายต่อวินาทีในการเรียกใช้โมเดลผ่าน Application Programming Interface
ที่มา: marktechpost.com