ИИтак

← Назад

модель · Cohere · вышла 9 сентября

North Small Translate

Открытая модель Cohere для перевода текстов на 50 с лишним языков, веса только для исследований и некоммерческих задач

О модели

North Small Translate — модель Cohere, которая делает одно: переводит текст. Это первая модель для перевода в линейке North. Внутри у неё смесь экспертов (mixture of experts): в модели 218 млрд параметров, но на каждый фрагмент текста включаются 8 из 128 «экспертов» и общие блоки, то есть около 25 млрд параметров. Поэтому она работает быстрее плотной модели того же размера. Cohere делала её вместе с RWS — компанией, которая занимается переводом и языковыми технологиями. Её специалисты из подразделения Language Weaver помогали настраивать качество перевода на реальных текстах.

Cohere называет модель следующим шагом после Command A Translate — своей прошлой модели для перевода. На наборе тестов WMT26, по замерам лаборатории, North Small Translate набирает 83,6 балла. У DeepL NextGen 81,37, у Google Translate 68,2. В многопроходном режиме модель сама находит ошибки в своём переводе и исправляет их, и результат растёт до 84,36. Отдельно компания выделяет длинные документы: на её собственной оценке перевода длинных текстов у модели 48,9 балла, у Google Translate — 21,3.

Модель нужна там, где перевод — основная работа: документы, локализация, многоязычные тексты компаний. Среди языков, которые Cohere поддерживает лучше всего, есть русский и украинский, а также арабский, немецкий, французский, японский и корейский. Попробовать модель можно бесплатно через API Cohere, пока не исчерпаны лимиты. Компаниям, которым нельзя отправлять тексты во внешние сервисы, Cohere предлагает отдельную закрытую среду Model Vault, а RWS — свою платформу Language Weaver.

Модель работает только с текстом и годится только для перевода — это не универсальный чат-бот. Веса открыты по лицензии CC BY-NC 4.0: их можно скачивать и дообучать, но только для исследований и некоммерческих задач. Для коммерческого применения нужна отдельная лицензия от Cohere или RWS. Для запуска нужны серверные ускорители: в сжатом 4-битном виде — две Nvidia H100 или одна B200, в полной точности BF16 — восемь H100 или четыре B200.

Новости о модели

  1. Cohere выпустила North Small Translate — открытую модель для перевода

    Модель переводит более чем на 50 языков и, по тестам Cohere, обходит DeepL и Google Translate. Скачать её можно бесплатно, но только для исследований и некоммерческих задач.

Данные: models.dev (MIT).