Mistral откроет веса модели Large 4
1 трлнпараметров в модели всего
3 800ускорителей NVIDIA Grace Blackwell для обучения
160+языков в обучающих данных
С 6 октября Large 4 доступна только как предварительная версия через API в Mistral Studio. Срок назвала сама Mistral, но расплывчато: веса выйдут «до конца месяца», точного дня нет. Когда их выложат, модель можно будет скачать, запустить на своих серверах или в частном облаке и дообучить. Mistral продаёт её прежде всего на этом: заказчики держат ИИ под своим контролем.
Вместе с весами Mistral обещает рассказать об устройстве модели, показать новые бенчмарки и описать, как её дообучали. Стоит посмотреть, под какой лицензией выйдут веса: на странице анонса об этом ни слова. И ещё — насколько выложенная версия будет отличаться от предварительной: обучение с подкреплением на момент анонса не закончилось.