دراسة تؤكد أن ChatGPT يخطئ عندما يجيب على أسئلة البرمجة

 دراسة جديدة وجدت أن ChatGPT يجيب على أسئلة البرمجة بشكل خاطئ بنسبة 52% ، وفضل المشاركون في الدراسة إجابات ChatGPT بنسبة 35% رغم احتوائها على معلومات خاطئة بسبب صياغتها الجيدة والشاملة 

لم يكتشف المبرمجون في الدراسة الأخطاء في إجابات ChatGPT بنسبة 39% ، مما يبرز الحاجة إلى توعية حول مخاطر الاعتماد على المعلومات المقدمة من الأدوات الذكية .

تُوصف روبوتات الدردشة ذات الذكاء الاصطناعي مثل ChatGPT من OpenAI بأنها أدوات ثورية يمكن أن تساعد العمال على أن يصبحوا أكثر كفاءة وربما تحل محلهم بالكامل. ومع ذلك، كشفت دراسة جديدة من جامعة بوردو أن ChatGPT يجيب على أسئلة برمجة الكمبيوتر بشكل غير صحيح بنسبة 52٪ من الوقت. 

وحلل البحث الذي تم تقديمه في مؤتمر التفاعل بين الكمبيوتر والإنسان في هاواي 517 سؤالًا برمجيًا من Stack Overflow تم تغذيتها إلى ChatGPT.

وجدت الدراسة أن 77% من إجابات ChatGPT كانت مطولة بشكل مفرط. وعلى الرغم من هذه المشكلات، فضل المشاركون في دراسة المستخدم اجابات الذكاء الاصطناعي بنسبة 35%

تنوعت الأخطاء بين عدم فهم المفاهيم البرمجية وعدم دقة المعلومات والأخطاء اللوجستية في الرمز البرمجي والمصطلحات التقنية.

بالإضافة إلى الأخطاء، انتقدت الدراسة أيضاً انحياز ChatGPT إلى تقديم إجابات طويلة ومعقدة تفوق الحاجة الحقيقية، مما يؤدي إلى تشتيت وإرباك المطورين.

وتعتبر نتائج الدراسة ذات أهمية كبيرة، حيث يمكن أن تنجم عن  أخطاء البرمجة مشكلات أكبر في وقتٍ لاحق، مما يؤثر على أقسام أو مؤسسات بأكملها. بالإضافة إلى ذلك، يمكن أن تتسبب الأخطاء في تعطل النظام أو فشل التطبيقات، مما يستدعي تدخلات تصحيحية مُكلفة ومرهقة للمبرمجين.

وشددرالباحثون في ملخص الدراسة على أهمية توخي الحذر والوعي عند استخدام إجابات ChatGPT في مهام البرمجة بسبب انتشار الأخطاء في الإجابات التي يقدمها.

ويُوصى باللجوء إلى أدوات أخرى مثل GitHub Copilot التي أظهرت كفاءة عالية في مساعدة المبرمجين، كما يستطيع المبرمجون التحقق من صحة الأكواد المُقدمة من ChatGPT باستخدام مراجعات بشرية أو أدوات تحليل الأكواد البرمجية. ويمكن أن تُساهم هذه الخطوات في تقليل نسبة الأخطاء وتحسين جودة العمل البرمجي.