นักวิจัยของสถาบันวิจัย AI ของ LG คว้ารางวัลบทความดีเด่นจากการประชุมนานาชาติด้านการประเมินประสิทธิภาพโมเดล AI (เกาหลี)

ตามที่สถาบันวิจัย AI ของ LG เปิดเผย Kim Seung Woo-won นักศึกษาปริญญาเอกจากมหาวิทยาลัย Carnegie Mellon ในสหรัฐอเมริกา ได้นำเสนอผลลัพธ์ของโครงการวิจัยร่วมกับสมาคมปัญญาประดิษฐ์แห่งอเมริกาเหนือ (NAACL) ซึ่งเป็นการประชุมนานาชาติเกี่ยวกับภาษาศาสตร์เชิงคำนวณและสาขาอื่นๆ
สมาคมการคำนวณแห่งอเมริกา
เขาได้รับรางวัลบทความดีเด่นจากวารสารภาษาศาสตร์ นักวิจัยคิมคือ LG
ในขณะที่ทำงานเป็นนักศึกษาฝึกงานที่ Super Intelligence Lab ของสถาบันวิจัย AI เขาได้ทำงานเกี่ยวกับ AI เชิงสร้างสรรค์ (ปัญญาประดิษฐ์) ร่วมกับทีมวิจัย ซึ่งมีนายอี มุนแท หัวหน้าของ Super Intelligence Lab อยู่ด้วย
เราได้พัฒนา "BIGGEN BenchMARK" เพื่อประเมินประสิทธิภาพของโมเดล ทีมวิจัยที่นำโดยคิมประกอบด้วยนักวิจัยจากมหาวิทยาลัย Yonsei และสถาบันเทคโนโลยีแมสซาชูเซตส์
นักวิจัยจากมหาวิทยาลัยหลายแห่ง รวมทั้ง MIT เข้าร่วมในการศึกษานี้ วิธีการประเมินที่มีอยู่สำหรับโมเดล AI เชิงสร้างสรรค์อาศัยดัชนีเชิงนามธรรม เช่น ความยืดหยุ่นและความไม่เป็นอันตราย และผลลัพธ์อาจแตกต่างจากที่มนุษย์ได้มา
มีบางกรณีที่เป็นกรณีนี้ ในขณะเดียวกัน BigGen BenchMARK ได้จัดประเภทความสามารถที่โมเดล AI ควรมีออกเป็น 9 ประเภท เช่น ความสามารถในการดำเนินการตามคำสั่ง การอนุมานเชิงตรรกะ และการเข้าใจภาษาและบริบททางวัฒนธรรมที่หลากหลาย 77
ประกอบด้วยข้อประเมินประสิทธิผลทักษะ จำนวน 765 ข้อ สถาบันวิจัย AI ของ LG ใช้การเปรียบเทียบ BigGen เพื่อประเมินโมเดล AI เชิงสร้างสรรค์ 103 โมเดลและตรวจสอบร่วมกับกลุ่มผู้เชี่ยวชาญ
หลักฐานแสดงให้เห็นถึงความถูกต้องในระดับสูง