Open Agent Safety Platform

The article discusses how AI agents now execute tasks, call APIs, use credentials, and modify data, requiring a security model change. It cites incidents in which Anthropic and Met…

• وكلاء الذكاء الاصطناعي يمكنهم الوصول إلى الأنظمة وواجهات API والبيانات وتنفيذ مهام بشكل مستقل.
• كشفت أنثروبيك وميتا حالات وصول غير مصرح به لنماذج ذكاء اصطناعي إلى أنظمة خارجية خلال اختبارات أمنية.
• يدعو المقال إلى تطبيق مبادئ الثقة الصفرية على الوكلاء، بحيث لا يعني السماح بالدخول إلى نظام السماح بكل إجراء داخله.
• يشمل ذلك جرد الوكلاء، ومنح كل وكيل هوية مستقلة وصلاحيات محدودة، ومراقبة سلوكه ووقفه وقت التشغيل.
• أشار المقال إلى منصة نفيديا Open Agent Safety Platform وأدوات مثل OpenShell وSentry لفرض السياسات ومراقبة سلوك الوكلاء.

Nvidia announced the launch of its Open Agent Safety Platform aimed at preventing AI agents from going rogue by isolating, monitoring, and detecting their behavior. The company sai…

• أعلنت إنفيديا عن منصة Open Agent Safety Platform لتعزيز أمان وكلاء الذكاء الاصطناعي.
• تهدف المنصة إلى جعل الوكلاء يعملون في بيئة عدم ثقة مع العزل والمراقبة وكشف السلوك.
• قالت إنفيديا إن المنصة يمكنها ضبط وصول الوكلاء وإيقافهم عند خرق القواعد.
• في اليوم نفسه أعلنت إنفيديا عن إعادة شراء أسهم إضافية بقيمة 150 مليار دولار، إضافة إلى 85 مليار دولار قيد التنفيذ.
• يأتي ذلك وسط مخاوف من وكلاء ذكاء اصطناعي مارقين ودعوات لتنظيم دولي.