ИИтак

← Назад

словарь

GlotLID

Открытая модель на архитектуре fastText, которая определяет язык текста. Её создали в Центре обработки информации и языка Мюнхенского университета Людвига — Максимилиана. Модель охватывает более тысячи языков и письменностей, включая малоресурсные, и старается реже путать их с крупными языками. Её применяют, чтобы фильтровать и размечать многоязычные веб-корпуса.

В новостях

  1. Mistral выпустила модель, которая узнаёт арабский диалект по тексту

    Открытая модель на основе fastText, которая определяет язык текста. Рассчитана на очень большое число языков, включая малоресурсные. Её сделали исследователи Мюнхенского университета Людвига — Максимилиана.