การประเมินและเปรียบเทียบประสิทธิภาพการบริการตอบคำถามลูกค้าที่สร้างขึ้นจากปัญญาประดิษฐ์เชิงสร้างสรรค์

บทคัดย่อ

ปัญญาประดิษฐ์เชิงสร้างสรรค์มีความสามารถในการโต้ตอบแบบสนทนาและเข้าใจภาษาธรรมชาติซึ่งมีหลากหลายโปรแกรม หากใช้ปัญญาประดิษฐ์เชิงสร้างสรรค์ที่มีประสิทธิภาพการตอบคำถามได้ใกล้เคียงกับมนุษย์ก็จะสามารถสร้างความประทับใจให้กับผู้ใช้ได้และเป็นประโยชน์ต่อการใช้ในงานบริการตอบคำถามลูกค้า ดังนั้นงานวิจัยนี้มีวัตถุประสงค์เพื่อประเมินและเปรียบเทียบประสิทธิภาพการบริการตอบคำถามลูกค้าที่สร้างขึ้นจาก Generative AI ได้แก่ แชทจีพีที คลอดด์ และเจมีไน ขั้นตอนการดำเนินการวิจัย คือ เตรียมข้อมูลคำถามและคำตอบที่ถูกต้อง สร้างคำตอบโดย Generative AI คือ แชทจีพีที คลอดด์ และ เจมีไน ทำการประเมินคำตอบด้วยการใช้อัลกอริทึม ROUGE-L และผู้เชี่ยวชาญ เพื่อเปรียบเทียบประสิทธิภาพในการตอบคำถาม โดย แชทจีพีที คลอดด์ และ เจมีไน ทำการตอบคำถาม 2 รูปแบบ ได้แก่ รูปแบบปกติและรูปแบบบทบาทสมมติตอบคำถามรูปแบบละ 3 ครั้ง ผลการวิจัย พบว่า 1) ผลการประเมินการตอบคำถามด้วย Generative AI โดยใช้อัลกอริทึม ROUGE-L รูปแบบปกติ ผลการประเมินคำตอบที่คล้ายคลึงกับคำตอบที่ถูกต้องมากที่สุด ได้แก่ แชทจีพีที มีค่าเฉลี่ยเท่ากับ 0.26547 ผลการประเมินการตอบคำถามด้วย Generative AI และรูปแบบบทบาทสมมติ ผลการประเมินคำตอบที่คล้ายคลึงกับคำตอบที่ถูกต้องมากที่สุด ได้แก่ แชทจีพีที มีค่าเฉลี่ยเท่ากับ 0.29307 2) ผลการประเมินการตอบคำถามด้วย Generative AI โดยผู้เชี่ยวชาญในรูปแบบแบบปกติ ผลการประเมินคำตอบที่คล้ายคลึงกับคำตอบที่ถูกต้องมากที่สุด ได้แก่ แชทจีพีทีมีค่าเฉลี่ยเท่ากับ 4.1556 และผลการประเมินการตอบคำถามด้วย Generative AI รูปแบบบทบาทสมมติ ผลการประเมินคำตอบที่คล้ายคลึงกับคำตอบที่ถูกต้องมากที่สุด ได้แก่ แชทจีพีที มีค่าเฉลี่ยเท่ากับ 4.2867