นาย Rohit Prasad, รองประธานอาวุโสฝ่าย AGI ของ Amazon ได้ส่งสารถึงผู้ที่หมกมุ่นอยู่กับการจัดอันดับโมเดล AI โดยตรง โดยระบุว่า "ผมต้องการประโยชน์ใช้สอยในโลกแห่งความเป็นจริง เกณฑ์การทดสอบเหล่านี้ไม่มีความจริงเลย" เขากล่าวในระหว่างการสัมภาษณ์ก่อนการประกาศในงาน AWS re:Invent ที่ลาสเวกัส
Prasad ชี้ว่าวิธีการทดสอบ AI ที่แท้จริงนั้นควรต้องมีการใช้ชุดข้อมูลการฝึกอบรมที่เหมือนกัน และการประเมินผลควรทำโดยไม่มีข้อมูลภายในใดๆ ซึ่งไม่ใช่สิ่งที่เกิดขึ้นในปัจจุบัน เขายังเสริมว่าการประเมินผลในตอนนี้เริ่มมี “ความไม่แน่นอน” (noisy) และไม่สามารถแสดงประสิทธิภาพที่แท้จริงของ AI ได้อย่างครบถ้วน
มุมมองของ Amazon จึงมุ่งเน้นไปที่การสร้าง AI ที่สามารถนำมาใช้งานได้จริงและสร้างมูลค่าเพิ่มให้กับผู้ใช้ มากกว่าการเป็นผู้นำบนกระดานคะแนนของ benchmark ต่างๆ ข่าวนี้เป็นส่วนหนึ่งจากจดหมายข่าว ‘Sources’ โดย Alex Heath ซึ่งเผยแพร่บน The Verge
🏷️ หมวดหมู่: AI, Column, Sources
🔗 อ่านบทความฉบับเต็ม: The Verge
