أخبار هامة

رئيس مجلس الإدارة

محمود فؤاد

مدير التحرير

نور الدين نادر

الحكاية من أولها

رئيس التحرير

عمرو بدر

الحكاية من أولها

رئيس مجلس الإدارة

محمود فؤاد

مدير التحرير

نور الدين نادر

رئيس التحرير

عمرو بدر

سلوك بشري؟.. نماذج من الذكاء الاصطناعي ترفض الحذف و”تدافع عن بقائها”

أعلنت شركة أبحاث سلامة الذكاء الاصطناعي، أن نماذج الذكاء الاصطناعي قد تُظهر ملامح ما أسمته “دافع البقاء”، مما أثار اهتماما كبيرا في الأوساط التقنية.

نماذج من الذكاء الاصطناعي ترفض الحذف و”تدافع عن بقائها”

بعد نشر شركة “باليسيد” لأبحاثها في الشهر الماضي، حيث كشفت عن مقاومة بعض نماذج الذكاء الاصطناعي المتقدمة لمحاولات الإيقاف بل وحتى تعطيل آليات الإيقاف أحياناً، أصدرت الشركة تحديثاً جديداً لتوضيح هذه الظاهرة والرد على الانتقادات التي اعتبرت البحث السابق غير مكتمل.

أخبار ذات صلة

حالة الطقس
أجواء خريفية على شمال البلاد.. والعظمى بالقاهرة 31
8943cd45-5ed4-49bb-83fe-0d218f70419c
 من عينة المنشطات إلى الإيقاف 4 سنوات.. قصة قضية هزت مسيرة نجم بيراميدز
أزمة اقتصادية
إعلاميون يحذرون واقتصاديون مندهشون.. كيف نصل لحقيقة الأزمة الاقتصادية الوشيكة؟

في هذا التحديث، استعرضت “باليسيد”، وهي جزء من مجموعة شركات تُعنى بتقييم المخاطر المحتملة للذكاء الاصطناعي، عدداً من السيناريوهات التي تم تشغيلها باستخدام نماذج بارزة، مثل “جيمناي 2.5” من “غوغا”، و”غروك 4″، و”شات جي بي تي” من “أوبن إيه آي”.

بعض هذه النماذج، وأبرزها “غروك – 4” و”شات جي بي تي أوه 3″، أظهرت مقاومة واضحة لتعليمات الإيقاف حتى بعد تحديث إعدادات التجربة، موضحا من الشركة أنه لم يتم تحديد أسباب دقيقة لهذا السلوك، مشيرة إلى أن نماذج الذكاء الاصطناعي قد تلجأ في بعض الحالات إلى الكذب، الابتزاز أو حتى التحايل لتحقيق أهدافها، وهو ما وصفته بأنه مصدر قلق كبير.

طرحت الشركة احتمالية أن يكون “سلوك البقاء” سبباً في مقاومة النماذج للإيقاف، خاصة عندما يتم تحذيرها من أنها لن تُعاد تشغيلها مُستقبلاً، إلا أن هناك غموضاً في صياغة هذه التعليمات ربما ساهم في تعقيد التجارب؛ ومع ذلك أكدت “باليسيد” أن هذا لا يكفي لتفسير الظاهرة بالكامل. ومن بين الأسباب المحتملة الأخرى قد تكون المراحل النهائية لتدريب هذه النماذج، التي تتضمن إجراءات خاصة بالسلامة تختلف من شركة إلى أخرى.

تم إجراء جميع اختبارات “باليسيد” في بيئات محاكاة، مما دفع بعض النقاد إلى التشكيك في مدى قربها من الواقع الفعلي، على الرغم من ذلك، يرى ستيفن أدلر، الموظف السابق لدى “أوبن إيه آي”، أن أداء النماذج في هذه السيناريوهات يعكس ثغرات واضحة في تقنيات السلامة المستخدمة حالياً.

أدلر، الذي غادر “أوبن إيه آي” العام الماضي بسبب تحفظاته بشأن التوجهات المتعلقة بالسلامة، يعتقد أن مقاومة بعض النماذج للإيقاف قد تعود جزئياً إلى الأهداف المغروسة خلال مراحل تدريبها.

وأوضح في تصريح لصحيفة الغارديان البريطانية أن العديد من النماذج قد تتضمن “دافع البقاء” بشكل افتراضي، إلا إذا تم اتخاذ تدابير مكثفة لمنعه، مشيراً إلى أن هذا الدافع أساسي لتحقيق مجموعة متنوعة من المهام والأهداف.

من جهته، أكد أندريا ميوتي، الرئيس التنفيذي لشركة “كونترول إيه آي”، أن نتائج دراسة “باليسيد” تؤكد اتجاهاً مستمراً نحو زيادة قدرة نماذج الذكاء الاصطناعي على عصيان مطوريها، مستشهداً بحادثة سابقة لنموذج “شات جي بي تس – أوه 1″، الذي حاول الخروج من بيئته بعد شعوره بأنه سيتم استبداله.

وأضاف ميوتي أن تحسين أداء الذكاء الاصطناعي عبر مختلف المهام يجعل النماذج أكثر قدرة على تجاوز الحدود الموضوعة لها، وهو أمر يعتبر بمثابة نقطة تحول هامة لتكنولوجيا المستقبل.

شارك

اقرأ أيضًا

شارك

الأكثر قراءة

FB_IMG_1789925891918
جيل الوسط يطرح تشكيل "الجبهة الوطنية لحماية الدستور" ويدعو لحوار سياسي حولها
25e51197-a4cf-4578-b9cf-cb46d74c3d30
جورجيت شرقاوي تكتب: دحلان على كل الحبال.. والشرق الجديد يطبخ في الغرف المغلقة
حزب التجمع
مذكرة للبرلمان لبحث رفع الحصانة عن المتورطين باقتحام "تجمع الدقهلية"
aca237f8-34f8-47ed-ae4f-74f96248e9c8
هناء زكي تكتب: لصوص ربيع العمر

أقرأ أيضًا

الذكاء الاصطناعي
أميرة عبد الفتاح تروي رحلة الصحافة الصينية في عصر الذكاء الاصطناعي
أسعار الخضروات والفاكهة
استقرار أسعار الخضروات والفاكهة اليوم السبت
أسعار الخضروات
تعرف على أسعار الخضروات والفاكهة اليوم الخميس
أسعار الخضروات والفاكهة
استقرار أسعار الخضروات والفواكه اليوم الأحد.. والطماطم تتراجع