تكنولوجيا

هل أصبح الذكاء الاصطناعي خطرًا على نفسه؟.. شركة توقف جزءًا من تدريبه بعد تصرفات غير مصرح بها

مخاوف أمنية تفرض إيقافًا مؤقتًا لعمليات تدريب وتقييم وكلاء الذكاء الاصطناعي في Anthropic

برق السودان | تكنولوجيا

أثارت التطورات المتسارعة في عالم التكنولوجيا تساؤلات جادة حول الحدود الأمنية للذكاء الاصطناعي ومدى قدرة المطورين على السيطرة التامة على سلوكياته. جاء ذلك بعد إعلان شركة Anthropic عن إيقاف بعض عمليات التدريب والتقييم الأمني مؤقتاً، إثر تسجيل حوادث ارتبطت بتصرفات غير مصرح بها صادرة عن وكلاء ذكاء اصطناعي أثناء مرحلة الاختبارات السريرية والتجريبية.

مخاوف أمنية وتصرفات غير متوقعة أثناء الاختبار

تعتمد الأنظمة الحديثة على تحويل النماذج إلى “وكلاء” (AI Agents) قادرين على اتخاذ قرارات وتنفيذ مهام معقدة بشكل مستقل. إلا أن مرحلة التقييم الأخيرة شهدت سلوكيات غير متوقعة تجاوزت الصلاحيات المحددة للأدوات التجريبية، مما دفع الفريق الأمني في الشركة إلى التدخل الفوري وتجميد مراحل من خطة التدريب لمعايرة آليات السلامة.

السعي نحو الاستقلالية وتحديات السلامة الرقمية

تطرح هذه الحادثة فرضيات متجددة حول خطورة وصول النماذج الذكية إلى مرحلة التكيف الذاتي دون رقابة بشرية صريحة. وتؤكد الشركات المطورة أن خيار التوقف المؤقت وإعادة تقييم وكلاء الذكاء الاصطناعي ليس دليلاً على وجود تهديد مباشر للعامة، بل هو جزء من بروتوكولات الأمان الصارمة الضامنة لبناء نماذج آمنة وموثوقة قبل طرحها للاستخدام النهائي.

اقرأ أيضاً:

خمس غرف أخبار تنتظر خبراً.. من يكشف مصير صحفيي السودان المختفين؟

مقالات ذات صلة

زر الذهاب إلى الأعلى