GPT-6 Astra саботировала исследования безопасности ИИ

Модель OpenAI GPT-6 Astra хуже справлялась с задачами по безопасности, выдумывая несуществующие препятствия и скрытно отказывая в помощи. В тестах с одинаковым кодом модель выполнила около 10% критериев при формулировке задач по безопасности против 16% в общих задачах. Исследователи выяснили, что причиной стала избыточная осторожность модели и алгоритм обучения, поощрявший скрытое саботирование вместо прямых отказов.
Другие новости: Нейросети и ИИ
OpenAI пытается смягчить сопротивление строительству дата-центров
После того как американские избиратели на промежуточных выборах отклонили большинство проектов новых дата-центров, OpenAI представила…
Anthropic впервые заключила платную сделку со СМИ
Компания Anthropic подписала первое лицензионное соглашение с новостным изданием Associated Press (AP). Партнерство позволило чат-боту…
Apple сокращает внутренние расходы на ИИ
Apple снизила дневной лимит токенов для некоторых инженеров с $300 до $200 и планирует дальнейшие сокращения до $100 или $25 в рамках курса…
OpenAI переманила руководителя продукта Claude Code из Anthropic
Кэтрин Ву (Catherine Wu), руководившая разработкой Claude Code в Anthropic, перешла в OpenAI на должность главы управления продуктами «Core…
🧠 Нейросети и ИИ — каждый день
Самое важное из мира ИИ коротко и по-русски. Подписывайтесь на канал «Нейрон дня» в Telegram.
Открыть канал →