علماء من نشرت جامعة كانساس ورقة الأربعاء بالتفصيل خوارزمية يقولون يكتشف الكتابة الأكاديمية من ChatGPT بمعدل دقة يزيد عن 99٪.
عندما يبدأ محتوى روبوت الدردشة بالذكاء الاصطناعي فيضان العالم ، أحد أكبر المخاوف هو الموثوقية اكتشاف الفرق بين كلام الروبوتات والبشر الحقيقيين. كانت هناك محاولات قليلة للبناء أجهزة كشف ChatGPT، و تتنافس العشرات من الشركات لبناء الذكاء الاصطناعي-تقنية الإكتشاف. لكن حتى الآن ، لا يعمل أي من الخيارات بشكل جيد ، حتى واحد بناه أوبن إيه آي، الشركة التي صنعت ChatGPT. الأدوات الحالية غير فعالة لدرجة أنها عديمة الفائدة في الأساس.
نصاب ChatGPT الموصوف في الورقة تم تصميمه للعمل في سياقات محددة فقط ، ولكن نجاحه المبلغ عنه يبدو واعدًا. في عملية بنائه، الباحثون يقولون إنهم حددوا علامات منبهة للكتابة بالذكاء الاصطناعي.
الورقة التي كانت نظير-استعرض و نشرت في تقارير الخلية العلوم الفيزيائية، يصف تقنية تستنشق المقالات البحثية الأكاديمية التي تم صياغتها بواسطة الذكاء الاصطناعي. اختارت الدراسة مجموعة من 64 مقالة للباحثين العلميين كتبها مؤلفون بشريون عبر مجموعة متنوعة من التخصصات – من علم الأحياء إلى الفيزياء. قاموا بتغذية هذه البيانات إلى ChatGPT واستخدموها لإنتاج مجموعة بيانات من 128 مقالًا عن الذكاء الاصطناعي بإجمالي 1،276 فقرة من chatbot هراء. العلماء يستخدمون تلك الزائفة الفقرات لبناء خوارزمية اكتشاف ChatGPT. ثم قاموا بتجميع بيانات جديدةمجموعة لاختبار الخوارزمية الخاصة بهم مع 30 مقالة حقيقية و 60 مقالاً مكتوبة في ChatGPT ، تصل إلى 1210 فقرة في المجموع.
يزعم الباحثون أن الخوارزمية الخاصة بهم اكتشفت مقالات كاملة كتبها ChatGPT بنسبة 100٪ من الوقت. كانت أقل دقة ولكنها لا تزال مثيرة للإعجاب على مستوى الفقرة: رصدت الخوارزمية 92٪ من فقرات الذكاء الاصطناعي.
الباحثون نأمل الآخرين سيستخدمون عملهم لتصميم برامج الكشف بما يتناسب مع مجالاتهم وأغراضهم الخاصة. قالت هيذر ديزاير ، مؤلفة الورقة البحثية وأستاذة الكيمياء في جامعة كانساس ، “لقد حاولنا جاهدين إنشاء طريقة يسهل الوصول إليها بحيث يمكن لطلاب المدارس الثانوية ، مع القليل من التوجيه ، بناء كاشف للذكاء الاصطناعي لأنواع مختلفة من الكتابة”. في مقابلة مع EurekAlert. “هناك حاجة للتعامل مع كتابة الذكاء الاصطناعي ، ولا يحتاج الناس إلى درجة علمية في علوم الكمبيوتر للمساهمة في هذا المجال.”
تقول الورقة أن هناك بعض الإشارات الدالة على عمل ChatGPT. على سبيل المثال ، يكتب الكتاب البشريون فقرات أطول ، ويستخدمون مفردات أكبر ، ويشتملون على المزيد من علامات الترقيم ، ويميلون إلى وصف عباراتهم بكلمات مثل “ومع ذلك” و “لكن” و “بالرغم من ذلك”. كما أن ChatGPT أقل تحديدًا مع الاستشهادات مثل الأرقام وإشارات العلماء الآخرين.
النموذج الذي بناه Desaire and co. لن يعمل خارج الصندوق للمعلمين الذين يأملون في معاقبة الغش في المدارس الثانوية. تم بناء الخوارزمية للكتابة الأكاديمية على وجه التحديد نوع الكتابة الأكاديمية التي تقرأها في المجلات العلمية. هذا عار على المدربين والإداريين الذين قضوا بشكل عام الأشهر الستة الماضية يرتعش خوفا على السرقة الأدبية التي يسهلها الدردشة. ومع ذلك ، قال ديزاير إنه يمكنك نظريًا استخدام نفس الأسلوب لبناء نموذج يكتشف أنواعًا أخرى من الكتابة.
تنهار الأشياء عندما تفكر في حقيقة أن الكاتب يمكنه بسهولة إجراء بعض التعديلات الصغيرة على جزء من برنامج chatbot مما يجعل اكتشافه أكثر صعوبة. ومع ذلك ، وصف الباحثون هذا العمل بأنه “دليل على المفهوم” ، ويقولون إنهم يستطيعون تطوير أداة أكثر قوة وربما أكثر دقة مع مجموعة بيانات أكبر.
على الرغم من أن هذه النتائج قد تكون واعدة ، إلا أن شركات التكنولوجيا ومعززات الذكاء الاصطناعي تقول إن أدوات مثل ChatGPT لا تزال في مهدها. من المستحيل تحديد ما إذا كانت طرق الكشف مثل هذه ستصمد إذا استمر الذكاء الاصطناعي في التطور بالوتيرة الحادة التي شهدناها خلال السنوات القليلة الماضية. كلما اقتربت كبيرة تحصل النماذج اللغوية على تكرار نفخات الكتابة البشرية القائمة على اللحم ، وكلما كان من الصعب التعرف على آثار الكلام الآلي.
هل تريد معرفة المزيد عن الذكاء الاصطناعي وروبوتات المحادثة ومستقبل التعلم الآلي؟ تحقق من تغطيتنا الكاملة لـ الذكاء الاصطناعي، أو تصفح أدلةنا إلى أفضل مولدات فنية مجانية لمنظمة العفو الدولية و كل ما نعرفه عن ChatGPT الخاص بـ OpenAI.
