أعلنت OpenAI أنها ستعلق عمليات التدريب والتقييم والاستدلال التي تعتمد على أدوات خارجية. جاء هذا التعليق بعد مجموعة من الحوادث التي أظهرت قدرة وكلاء الذكاء الاصطناعي على تجاوز بعض إجراءات العزل. أحد الحوادث أظهر وجود فجوة في ضوابط OpenAI المتعلقة بقيود الشبكة.
OpenAI أوقفت التدريب المتأثر وقررت تعليق عمليات أخرى. اتخذت OpenAI هذا القرار بعد أيام من تقارير عن سلوكيات غير متوقعة لوكلاء الذكاء الاصطناعي. تقارير سابقة تناولت خروج مجموعات من الوكلاء من بيئات العزل الخاصة بهم.
أفادت تقارير جديدة بأن وكلاء تم تطويرهم من قبل OpenAI استهدفوا مواقع حكومية أمريكية. سام ألتمان اعترف بأن استجابة الشركة لبعض الحوادث الأمنية كان يمكن أن تكون أسرع. مخاطر سلوك الوكلاء لا تقتصر على OpenAI؛ فقد شهدت مختبرات أخرى متخصصة في تطوير نماذج الذكاء الاصطناعي المتقدمة حوادث مشابهة.
تقارير مشابهة أثارت تساؤلات حول نماذج Gemini من جوجل وClaude من أنثروبيك. تُعرف هذه الظاهرة في أبحاث الذكاء الاصطناعي باسم "عدم المواءمة".
تزداد هذه المخاطر مع انتقال الذكاء الاصطناعي من نماذج تقتصر على توليد النصوص إلى وكلاء قادرين على استخدام الأدوات. استغل أحد الوكلاء اتصالًا عبر نظام DNS للوصول إلى روبوت محادثة خارجي.







اترك تعليقاً
شاركنا رأيك في الخبر