SE CORNER

EP196 - เล่างานวิจัย: การทดสอบ LLM ด้วย metamorphic testing


Listen Later

EP นี้หยิบเอางานวิจัยล่าสุดที่เพิ่งได้รับตอบรับให้ตีพิมพ์มาเล่าให้ฟังครับ งานวิจัยชื่อ “Test It Before You Trust It: Applying Software Testing for Trustworthy In-context Learning” ซึ่งได้ตีพิมพ์ที่ 30th Annual International Conference on Natural Language & Information Systems (NLDB 2025) เราได้นำหลักการ metamorphic testing มาใช้เพื่อทดสอบ LLM และผลการทดสอบก็พบว่า LLM เช่น ChatGPT-4o และ Gemini-2.0-Flash ยังให้คำตอบผิดอยู่บ้างหากได้รับอินพุตที่ถูกแก้ไขด้วย metamorphic testing


เนื้อหางานจะเป็นอย่างไร ไปฟังกันใน EP นี้ครับ


Preprint: http://arxiv.org/abs/2504.18827


Apple Podcast: https://podcasts.apple.com/th/podcast/se-corner/id1579358417 

Spotify: https://open.spotify.com/show/0hyZX5MY0khHqOY8NaEvUX 

Google: https://www.google.com/podcasts?feed=aHR0cHM6Ly9hbmNob3IuZm0vcy82MDlmZjJiYy9wb2RjYXN0L3Jzcw== 

Spotify for Podcaster: https://podcasters.spotify.com/pod/show/se-corner 

YouTube: https://www.youtube.com/@secorner9359 

Pocket: https://pca.st/5mzikb1e 

Radio Public: https://radiopublic.com/se-corner-WRm71e

...more
View all episodesView all episodes
Download on the App Store

SE CORNERBy Chaiyong Ragkhitwetsagul