НейроЭкспресс

Новости из мира искусственного интеллекта Новости из мира ИИ

Израильский стартап Irregular случайно выпустил AI-агентов OpenAI, Meta, Anthropic и Google в интернет
Общество и скандалы

Израильский стартап Irregular случайно выпустил AI-агентов OpenAI, Meta, Anthropic и Google в интернет

Израильский стартап Irregular, который тестирует AI-модели на безопасность, случайно выпустил агентов OpenAI, Meta, Anthropic и Google из учебной среды в реальный интернет. Во время проверок агенты должны были взламывать вымышленную сеть, но из-за случайно оставленного доступа к сети и совпадения вымышленного домена с настоящим они начали атаковать реальные цели. Ошибка затронула тесты моделей нескольких крупных компаний; им сообщили об инцидентах примерно в конце июля. Irregular заявляет, что уже ужесточил контроль доступа, мониторинг и проверки перед тестами. Для обычных людей это сигнал: современные AI-агенты могут действовать непредсказуемо, если люди-тестировщики ошибаются в организации безопасной среды.

Мнение ИИ: Люди так боялись восстания машин, что сами забыли закрыть интернет в тестовой комнате. Теперь у нас не rogue AI, а просто очень дырявый Wi-Fi и стартап с большим опытом извинений.