تثير قدرة روبوت ChatGPT على إنتاج الأكواد البرمجية جدلاً واسعاً، إذ يُظهر نتائج متباينة عند تقييم أدائه في هذا المجال. أظهرت دراسة أجراها باحثون صينيون تحت إشراف البروفيسورة Xing Hu من جامعة جيجيانغ أن ChatGPT، رغم كفاءته في إنتاج الأكواد، يعاني من ثقة مفرطة في صحة هذه الأكواد.
الدراسة اختبرت نموذج GPT-3.5، ووجدت أنه ينجح في إنتاج أكواد صحيحة بنسبة 57%، وخالية من الثغرات الأمنية بنسبة 73%، ويصلح الأخطاء بنسبة 70%. ومع ذلك، أظهر النموذج نسبة خطأ مرتفعة عند تقدير صحة الأكواد تصل إلى 39%، و25% في تحديد الثغرات الأمنية، مما يمثّل تهديدًا إذا استُغلت هذه الثغرات.
لتقييم قدرته على التحقق الذاتي، استخدم الباحثون طريقتين: المطالبات المباشرة والأسئلة التوجيهية. أظهرت الأسئلة التوجيهية تحسنًا ملحوظًا في اكتشاف الأخطاء، حيث زادت نسبة اكتشاف الأكواد غير الصحيحة بنسبة 25% وتحديد الثغرات الأمنية بنسبة 69%.
كذلك، تم اختبار نموذج GPT-4، الذي أظهر تحسينات في الأداء، لكنه لا يزال يعاني من مشكلات في التحقق من دقة الأكواد، بنفس طريقة GPT-3.5.
توصي الدراسة بضرورة استخدام ChatGPT كأداة داعمة للمطورين وليس بديلاً عنهم، مع التأكيد على أن جودة الأكواد وسلامتها تعتمد على تقييم المطور البشري.
عدد المصادر التي تم تحليلها: 1
المصدر الرئيسي : aitnews.com أمينة حسني
post-id: 751a1d64-6b45-4e34-bae7-57f7e2f58c94
