OpenAI расформировала команду по оценке рисков ИИ

Фото: The Verge
Краткий ответ
OpenAI расформировала команду по оценке рисков ИИ, ранее занимавшуюся анализом потенциальных угроз, таких как неконтролируемое поведение моделей.
Компания OpenAI завершила работу подразделения, отвечавшего за оценку потенциальных рисков, связанных с развитием моделей искусственного интеллекта. Как сообщает Financial Times, функции команды, которая анализировала угрозы вроде неконтролируемого поведения ИИ или кибератак, теперь распределены между другими отделами. В частности, вопросы биологической и кибербезопасности переданы профильным командам.
Это решение стало частью серии структурных изменений в OpenAI, которая готовится к возможному крупному публичному размещению акций (IPO). За последние годы компания уже ликвидировала несколько ключевых подразделений, включая команды по готовности к созданию искусственного общего интеллекта (AGI) и выравниванию моделей (superalignment). Эти шаги вызвали критику со стороны экспертов, включая бывшего сотрудника OpenAI Яна Лейке, который обвинил компанию в игнорировании вопросов безопасности ради разработки «привлекательных продуктов».
Руководитель расформированной команды, Дилан Скандинаро, ранее перешедший в OpenAI из Anthropic, теперь сосредоточится на изучении последствий «рекурсивного самосовершенствования» ИИ. В последние месяцы компанию покинули и другие ключевые специалисты, включая главу по этике Хлою Бакалар и главного футуриста Джоша Ахиама.
Частые вопросы
- Почему OpenAI расформировала команду по оценке рисков ИИ?
- Компания перераспределила обязанности команды между другими подразделениями, сосредоточившись на конкретных направлениях, таких как биологические и киберугрозы. Это решение совпало с реструктуризацией перед возможным IPO.
- Кто критиковал решение OpenAI?
- Бывший сотрудник OpenAI Ян Лейке, покинувший компанию в 2024 году, заявил, что компания пренебрегает безопасностью ради разработки коммерческих продуктов.
- Какие ещё изменения произошли в OpenAI?
- Ранее были расформированы команды по готовности к AGI и выравниванию моделей (superalignment). Также покинули компанию ключевые специалисты по этике и безопасности.
Лента для Дзен: /feed/dzen.xml · RSS: /feed.xml