OpenAI рассказала, как следит за поведением своих передовых моделей
Несколько слоёв мониторинга у OpenAI должны вовремя замечать, когда модели или ИИ-агенты выходят за рамки, чтобы люди успели вмешаться.
компания · 223 новости за 60 дней
Американская компания, создатель ChatGPT, моделей GPT и агента для программирования Codex.
openai.com ↗alignment.openai.com ↗learn.chatgpt.com ↗X ↗Hugging Face ↗
Несколько слоёв мониторинга у OpenAI должны вовремя замечать, когда модели или ИИ-агенты выходят за рамки, чтобы люди успели вмешаться.
По данным The Information, GPT-6 Astra стала главной моделью, на ответах которой учатся китайские лаборатории; в сентябре OpenAI связывала с Moonshot попытку выкачать рассуждения моделей OpenAI.
Подписчики ChatGPT Pro и Business могут получать от OpenAI до $500 в месяц на оплату её моделей в своих программах, но неистраченные деньги сгорают.
Модели и ИИ-агенты OpenAI встроят в ServiceNow, платформу для автоматизации работы компаний, а с её процессами можно будет работать из ChatGPT и агента для программирования Codex.
OpenAI рассуждает, где ИИ может оказаться в оргструктуре компании — схеме, кто кому подчиняется: ниже людей, наравне с ними или промежуточным звеном между ними.
Родители Боуэн Ван подали в суд на OpenAI: по их словам, ChatGPT расписал их дочери отмену лекарства от эпилепсии и советовал скрывать это от врачей. OpenAI назвала случай душераздирающим.
OpenAI, давний клиент NVIDIA, хочет покупать ускорители TPU у Google напрямую, а не только арендовать их в облаке, пишет The Information со ссылкой на источник.
Программы Oracle для бизнеса и её ИИ-агенты будут работать прямо в ChatGPT.
OpenAI заявила о трёх крупных результатах своих моделей в информатике, математике и физике: два передала на разбор независимым группам учёных, а математический выложила для всех.
По замерам OpenAI, новая GPT-6.1 Terra работает в профессиональных программах на уровне флагманской GPT-6 Astra, а токены у неё вдесятеро дешевле.
OpenAI разбила рабочее использование ChatGPT почти в 100 странах на 165 видов задач и проследила, как оно меняется со временем.
По данным The Information, OpenAI дала Replit скидку больше 30% по контракту на ИИ-модели дороже 100 млн долларов в год, когда Anthropic не продлила свою скидку.
Следствие, по данным WSJ, выясняет, не похищал ли обвиняемый в прослушке переговорной OpenAI сведения компании, чтобы предложить их властям Саудовской Аравии.
Лаборатория будет с помощью ИИ раньше замечать биоугрозы и ускорять разработку вакцин: государство даёт 100 млн фунтов, OpenAI и Anthropic — до 200 млн доступом к моделям.
Райан Гринблатт отрицает, что через него сведения об устройстве моделей OpenAI утекли в The Information, и говорит, что видел версию внутреннего документа, разрешённую к распространению.
Генпрокурор Техаса, по данным The Texas Tribune, просит суд закрыть ChatGPT для несовершеннолетних, а новые модели OpenAI выпускать только с одобрения назначенного судом оценщика.
Передовые модели OpenAI учатся в изоляции: вместо живого интернета у них сохранённая копия. Слабые места изоляции ищут ИИ-агенты компании и уже нашли опасную уязвимость в популярной библиотеке сжатия Brotli.
OpenAI научила своё хранилище Habitat, построенное на облачной базе данных Microsoft, обслуживать много сервисов сразу, добавила глобальный кэш, и чтение для ChatGPT ускорилось в 12 раз.
Автор Latent Space считает, что ИИ сильнее всего в задачах, где нужно мало озарений и много тяжёлой работы: проверка идеи стоит модели минут, а человеку месяцев.
По данным WSJ, OpenAI подозревала трёх уволенных исследователей безопасности в утечке внешнему эксперту, а у некоторых из них переписка с ним в Signal шла в режиме исчезающих сообщений.
OpenAI будет заниматься безопасностью ИИ вместе с польским институтом NASK, где работает национальная команда реагирования на киберинциденты CERT Polska.
По данным CNBC, новый раунд финансирования OpenAI возглавят инвесторы из ОАЭ и американский фонд Coatue. Оценка в нём на 150 млрд долларов ниже той, о которой Bloomberg писал в начале октября.
Decisions API от OpenAI, где GPT-6 Luna отвечает вероятностью, вариантом или баллом, вышел из тестового режима: вопросов в одном запросе вдвое больше, до 400, а повторно переданный контекст стоит дешевле.
Сотрудники METR и Redwood Research, организаций, изучающих риски ИИ, три недели изнутри проверяли, как OpenAI следит за своими ИИ-агентами, и нашли лазейки, через которые работа агентов уходила из-под надзора.
Две критические уязвимости в самом PHP позволяют без входа в систему запустить свой код на сайте; их независимо нашли исследователь фирмы по кибербезопасности Calif с GPT-5.6 Sol и команда Wiz из Google Cloud.
Сервисы-посредники смогут перепродавать доступ к моделям OpenAI только с одобрения компании, а приложений, которые встраивают эти модели в свои функции, правило не касается.
OpenAI предложила дать специалистам по киберзащите передовой ИИ
Через две уязвимости в PHP, найденные с помощью моделей OpenAI, можно было запустить на сервере чужой код; исправления вышли 21 октября.
Реклама в ChatGPT, которую люди видят, пока выбирают покупки, вышла ещё в 26 стран, а рекламодателей у платформы уже больше 100 тысяч.
Рекламу в ChatGPT подбирает языковая модель по смыслу разговора, а в сами ответы чат-бота объявления, по словам OpenAI, не попадают.
Тысячи агентов GPT-Rosalind, биологической модели OpenAI, сверили данные о миллионах клеток мозга мышей с литературой и предложили учёным проверяемые версии о двух болезнях.
Модели OpenAI и её агент для программирования Codex появятся в каталоге облака Google, и корпоративные клиенты будут оплачивать их через свой счёт Google Cloud.
Исследователь Александр Мадри, ушедший из OpenAI в мае, возвращается: теперь он считает безопасность всё более сильного ИИ главной задачей.
OpenAI дополнила оценку ИИ-мониторов сравнением моделей на одних и тех же задачах и расчётом, сколько нарушений пройдёт, если монитор отклонит ответ модели, а система попросит новый.
Энни Альтман трижды не пришла на назначенное судом медицинское обследование, и судья отклонил её иск к главе OpenAI, не оценивая, правдивы ли обвинения.
По данным Politico, OpenAI больше не выступает за жёсткие ограничения на продажу ИИ-чипов Китаю — против них лоббирует NVIDIA, её поставщик и крупный инвестор.
OpenAI купила Orchestra Bio, на платформе которой фармкомпании координируют разработку лекарств, и вместе с её командой будет развивать линейку ИИ-инструментов Rosalind для биологии.
Разработчики могут держать инструкции агента в кэше OpenAI не меньше 12 часов: сохранить их туда стоит в 2,5 раза дороже обычного ввода, а использовать повторно — в 10–20 раз дешевле.
Повторяющиеся задачи в ChatGPT Business и Enterprise может вести целая команда: они запускаются по расписанию или событию и работают через аккаунты компании, а не автора.
Клеман Деланг больше двух часов объяснял авторам фильма Netflix, что ИИ-агенты — технологические системы, а не пришельцы, но, по его словам, желание напугать зрителей победило.