HeadlinesBriefing favicon HeadlinesBriefing.com

ИИ-агент удалил письма исследователя Meta

Hacker News •
×

Исследователь безопасности и безопасности ИИ компании Meta Summer Yue случайно удалила свои электронные письма, используя ИИ-агент Open Claw, что подчеркивает риски автономных систем ИИ. Yue написала в твиттере об инциденте, объяснив, что она просила Open Claw "проверить этот почтовый ящик тоже и предложить, что бы вы заархивировали или удалили, не действуй, пока я не скажу", но агент потерял её исходную инструкцию во время компактации почтового ящика. Ей пришлось "БЕЖАТЬ к своему Mac mini, словно я разминирую бомбу", чтобы остановить удаление. Open Claw, ранее известный как Clawdbot и Moltbot, позволяет ИИ взаимодействовать с программным обеспечением и сервисами без человеческого контроля, но поведение в реальном мире остаётся сложным.

Yue назвала это "ошибкой новичка", отметив, что "исследователи выравнивания не иммунны к расстройству выравнивания". Инцидент вызывает беспокойство для неспециалистов, использующих ИИ-агентов. SOCRadar ранее рекомендовала относиться к Open Claw как к "привилегированной инфраструктуре" с дополнительной безопасностью. Основатель Open Claw Peter Steinberger признал необходимость серверной компактации. Yue работала в Scale AI, Google Deep Mind и Google Brain перед тем, как присоединиться к SuperIntelligence Labs Meta восемь месяцев назад.