ИИтак

← Назад

Источник · Аналитика

SemiAnalysis

Исследовательская фирма Дилана Пателя о полупроводниках и вычислительной инфраструктуре. Разбирает устройство и экономику дата-центров, ускорителей и облаков для ИИ.

3 новости за 60 дней

Сегодня 25 сентября, пятница

длинный текст 4 мин SemiAnalysis

SemiAnalysis выделила в работе серверов для ИИ-агентов режим «дозаполнения». Почему это важно

Агент дописывает сотни или тысячи токенов к контексту длиной в сотни тысяч. Под такие запросы может понадобиться отдельная группа серверов, считают аналитики.

SemiAnalysis

SemiAnalysis перенесла часть модели DeepSeek V4.1-Flash из видеопамяти в ОЗУ. Почему это важно

Engram — часть DeepSeek V4.1-Flash, таблица из готовых векторов для частых сочетаний токенов, около 189 ГиБ. После её переноса в оперативную память копии модели на B300 хватило двух ускорителей вместо четырёх. Выгрузка на SSD оказалась невыгодной.