Модель Ai2 научили отслеживать лососей по сонару и исправлять ошибки
Прототип Molmo2Fish на основе открытой модели Ai2 следит за лососями на записях сонара, а часть своих ошибок исправляет по подсказке обычными словами.
Исследователь Кай Ван Брант (Kai Van Brunt) приспособил открытую видеомодель Molmo 2 от Ai21 к записям сонара: его прототип Molmo2Fish следит за лососями и исправляет часть своих ошибок, если подсказать ему обычными словами. Об этом Ai2 рассказал в соцсети X.
Почему это важно: учёные следят за численностью лососей по видеозаписям. Если система ошибается, например насчитывает лишних рыб, запись порой приходится править вручную кадр за кадром.
Детали: сначала Ван Брант дообучил Molmo 2 на видео с сонара, а потом — на примерах ошибок слежения, подсказок и исправлений. В тестах прототип справлялся с частью ошибок после подсказки — например, когда система вела двух лососей как одну рыбу.
Ai2 выпустил Molmo 2 в декабре 2025 года, и отслеживать объекты на видео она умела с самого начала. По словам Ai2, открытый код позволил Ван Бранту переделать модель, а открытые данные обучения помогли понять, чему она научилась, и подготовить собственные данные.