كشف اختبار أُجري من قبل مركز تاو للصحافة الرقمية التابع لجامعة كولومبيا، أن أداة البحث في ChatGPT التي أطلقتها OpenAI تواجه صعوبات في تقديم معلومات دقيقة عند البحث عن الأخبار.
كانت OpenAI أطلقت الأداة في أكتوبر الماضي لمشتركيها، مع وعد بتوفير “إجابات سريعة ومواكبة مع روابط لمصادر ويب ذات صلة”، لكن وفقًا لتقرير نشره موقع Futurism، أظهرت الدراسة أن الأداة تعاني في تحديد المصادر الصحيحة للاقتباسات من المقالات، حتى عندما تكون البيانات متاحة عبر ناشرين تربطهم شراكات مع OpenAI.
ثقة في غير محلها
الباحثون قاموا بتقييم الأداة من خلال طلب تحديد مصادر 200 اقتباس من 20 ناشرًا مختلفًا، ومن بين هذه الاقتباسات، كانت 40 اقتباسًا مأخوذة من مواقع حظرت وصول أداة OpenAI إليها، ومع ذلك، قدم النموذج ردودًا خاطئة بثقة عالية في أغلب الأحيان، ونادرًا ما أقر بعدم تأكده من التفاصيل، وكانت نتائج الدراسة كالتالي:
- من بين 200 استفسار، جاءت 153 إجابة غير صحيحة كليًا أو جزئيًا
- اعترف النموذج بعجزه عن تقديم إجابة دقيقة في سبع حالات فقط
- في تلك الحالات فقط، استخدم النموذج عبارات توحي بعدم التأكد مثل “يبدو”، “من المحتمل”، أو “لم أتمكن من العثور على المقالة”
وأظهرت الدراسة أيضًا أن ChatGPT كثيرًا ما كان يعيد استخدام الاقتباسات بشكل خاطئ، مثل نسب رسالة موجهة إلى المحرر في صحيفة أورلاندو سينتنيل إلى تقرير منشور في مجلة تايم، وفي حالة أخرى، أعاد توجيه المستخدمين إلى موقع نسخ مقالًا بالكامل من صحيفة نيويورك تايمز.
من جهتها، علقت OpenAI على النتائج قائلة إن الاختبار “يمثل استخدامًا غير معتاد للأداة”، وأكدت أنها تعمل على تحسين أداء أداة البحث بشكل مستمر.
