Inception
Американский стартап (также Inception Labs), который разрабатывает диффузионные языковые модели Mercury. В отличие от обычных авторегрессионных моделей, которые пишут текст по одному токену, они порождают его блоками и уточняют параллельно, поэтому работают быстрее и дешевле. Компанию в 2024 году основали профессора Стефано Эрмон (Стэнфорд), Адитья Гровер (UCLA) и Владимир Кулешов (Корнелл). Не путать со стартап-программой NVIDIA Inception.
проверено по: inceptionlabs.ai ↗
См. также
- Диффузионная языковая модельЯзыковая модель, которая порождает текст не токен за токеном слева направо, как авторегрессионные модели, а итеративно уточняет сразу всю последовательность, начиная с зашумлённого или замаскированного состояния. Подход перенесён из диффузионных генераторов изображений и позволяет параллельно исправлять весь ответ.
- Диффузионная модельКласс генеративных моделей. При обучении к данным постепенно добавляют шум, а модель учится убирать его шаг за шагом; при генерации она начинает со случайного шума и за несколько итераций превращает его в результат. Это основной подход к генерации изображений, видео и звука. Есть и текстовые диффузионные модели: в отличие от обычных языковых моделей, они не пишут текст по одному токену, а уточняют весь ответ целиком.
В новостях
Inception выпустила модель Mercury 3 и заявила, что та обходит GPT-6 Luna
Американский стартап из Пало-Алто, который разрабатывает диффузионные языковые модели Mercury.
Inception выпустила Mercury Voice — модель для голосовых агентов
Американский стартап из Пало-Алто. Разрабатывает диффузионные языковые модели Mercury, которые генерируют текст не по одному токену, а сразу целыми фрагментами.
Сотрудник Inception свёл в гид 106 списков о моделях, которые не пишут текст, а выбирают ответ
Американский стартап из Пало-Алто, разработчик моделей Mercury. Его языковые модели пишут текст методом диффузии: уточняют сразу много слов параллельно, а не выдают их по одному.
Inception выпустила Mercury Voice — модель для голосовых агентов
Американский стартап из Пало-Алто, который делает диффузионные языковые модели Mercury. Его основали исследователи из Стэнфорда, UCLA и Корнелла.