วันพุธที่ 11 ธันวาคม พ.ศ. 2567

ChatGPT แย่มากในการตรวจสอบโค้ดที่ตัวเองสร้างขึ้น

binary-code
ภาพจาก IEEE Spectrum โดย Michelle Hampson

นักวิจัยจาก Zhejiang University ในประเทศจีนพบว่า ChatGPT มักจะมั่นใจในความถูกต้อง ช่องโหว่ และการซ่อมแซมโค้ดที่สร้างขึ้นมากเกินไป 

การศึกษาของพวกเขาพบว่า ChatGPT-3.5 มีอัตราความสำเร็จเฉลี่ย 57% ในการสร้างโค้ดที่ถูกต้อง 73% ในการสร้างโค้ดที่ไม่มีช่องโหว่ด้านความปลอดภัย และ 70% ในการซ่อมแซมโค้ดที่ไม่ถูกต้อง 

นักวิจัยพบว่าการใช้คำถามชี้นำช่วยให้ ChatGPT ระบุข้อผิดพลาดของตัวเองได้มากขึ้น ในขณะที่การขอให้สร้างรายงานการทดสอบช่วยเพิ่มจำนวนช่องโหว่ที่สำคัญ

อ่านข่าวเต็มได้ที่: IEEE Spectrum โดย Michelle Hampson

ไม่มีความคิดเห็น:

แสดงความคิดเห็น