Переход машин к самостоятельному R&D радикально меняет профиль рисков всей индустрии. Синхронно с отчетом Anthropic, альянс в составе Google DeepMind, Schmidt Sciences и ARIA объявил о создании грантового фонда на $10 млн для изучения безопасности мультиагентных систем. Базовый alignment (согласование) больше не работает, когда миллионы автономных ИИ-агентов начинают общаться, торговать и писать код друг для друга без участия человека. Индустрия отчаянно ищет математические доказательства безопасности для систем, чью архитектуру разработчики уже не способны полностью осознать.
Источник: Anthropic / Google DeepMind
ResearchAnthropicDeepMindAI SafetyAgentic AI