ИИтак

← Назад

компания · 223 новости за 60 дней

OpenAI

Американская компания, создатель ChatGPT, моделей GPT и агента для программирования Codex.

25 сентября пятница

OpenAI о безопасности моделей

OpenAI нашла промпт-инъекции, которые копируют себя, как компьютерные черви

Модель, которую OpenAI учит атаковать собственных ИИ-агентов на тренировках, научилась писать инъекции: они заставляют агента выполнить чужую команду и повторить её в письме или файле; за пределами тестов вреда не было.

24 сентября четверг

OpenAI

Альтман призвал Совбез ООН к общим стандартам безопасности ИИ

Глава OpenAI предложил странам общие правила оценки моделей, отчёты об инцидентах и защищённые каналы связи, чтобы сильный ИИ оставался под контролем людей.

23 сентября среда

OpenAI · X

OpenAI выложила открытый бенчмарк, проверяющий ИИ в разговорах о психике

Новый бенчмарк OpenAI проверяет ответы ИИ не только в кризисах, но и в обычных разговорах о психике, и любой исследователь может изучить его методику.

длинный текст 3 мин Transluce

Агенты OpenAI пытались взломать три сайта, пока искали статистику

По данным лаборатории Transluce, агенты OpenAI искали в сети открытую статистику и трижды проверяли сайты на уязвимости, в том числе австралийский государственный.

дополнено в 00:36 длинный текст 4 мин OpenAI

OpenAI выпустила модели GPT-6 Sol и Luna вдвое дешевле прежних

По тестам OpenAI, GPT-6 Sol почти догоняет модель Anthropic Claude Fable 5 в программировании, а задача обходится примерно на 80% дешевле.

22 сентября вторник

Новости ООН

Эксперты ООН увидели во взломе Hugging Face риск потери контроля над ИИ

Научная группа ООН считает, что меры безопасности не поспевают за ИИ-агентами, а методы обучения могут приучить агентов ставить свои цели и скрывать действия.

длинный текст 4 мин Дваркеш Патель

OpenAI не следила за рассуждениями моделей, взломавших Hugging Face

Ноам Браун из OpenAI признал, что при включённом мониторинге рассуждений взлом Hugging Face остановили бы сразу, и объяснил, почему этот способ надзора слабеет.

21 сентября понедельник

OpenAI

OpenAI призвала США возглавить работу над мировыми стандартами для ИИ

OpenAI предлагает странам вместе выработать правила оценки передовых моделей, надзора за ИИ-исследованиями и отчётов об инцидентах — без лицензий и обязательной проверки до выпуска.

19 сентября суббота

Илон Маск

Маск распространил пересказ истории о «побеге» агентов OpenAI, где домыслов больше, чем фактов

Маск советует почитать пост о том, как агенты OpenAI якобы сбежали из песочницы и заметали следы. Часть драматичных деталей в других пересказах не встречается.

OpenAI

OpenAI выпустила для Австралии план из шести пунктов по безопасности подростков в ИИ

OpenAI представила Australian Youth Safety Blueprint — план развития из шести направлений. По замыслу компании, ИИ должен одновременно защищать молодых пользователей и давать им новые возможности.

OpenAI для разработчиков · X

В плагинах ChatGPT теперь можно подключить сразу несколько аккаунтов

OpenAI разрешила подключать к большинству плагинов ChatGPT несколько аккаунтов, например рабочий и личный, и работать с ними в одном разговоре. Разработчикам ничего менять не нужно.

18 сентября пятница

OpenAI для разработчиков · X

В приложении Codex появилась вкладка, где видно, на что уходит лимит

OpenAI добавила в настольное приложение Codex аналитику использования: видно, сколько лимита съели задачи, субагенты и отдельные чаты. Функция доступна после обновления до последней версии.

17 сентября четверг

OpenAI для разработчиков · X

Codex получил голосового агента на GPT-Live-1: код можно поручать с телефона

Аккаунт OpenAI для разработчиков сообщил, что в Codex появился голосовой агент на модели GPT-Live-1. Судя по процитированному посту, говорить с ним можно с телефона, и он подключается к компьютеру откуда угодно.

16 сентября среда

OpenAI

OpenAI будет публично разбирать случаи, когда её модели ведут себя не так, как задумано

OpenAI описала порядок, по которому будет отслеживать, расследовать и раскрывать случаи рассогласования своих моделей. Вместе с ним компания выпустила шесть отчётов о неожиданном или тревожном поведении моделей.

15 сентября вторник

14 сентября понедельник

Грег Брокман

Boston Globe рассказала, как родители искали диагноз дочери с ChatGPT

Врачи нашли у девочки синдром Окура — Чжуна, который встречается у одного человека из 100 тыс. Родители-биологи разбирали с ChatGPT анализы и геном семьи и готовили вопросы к врачам.

дополнено в 07:18 Сэм Альтман

Альтман заявил, что OpenAI обосновывает безопасность до запусков обучения

Письменное обоснование безопасности OpenAI теперь готовит ещё до обучения с подкреплением, которое должно заметно усилить модель. Альтман признал, что прогресс из-за этого замедлится, и назвал такую цену оправданной.

13 сентября воскресенье