XDOF
XDOF — компания, которая собирает данные для обучения моделей управления роботами. Она также испытывает такие модели на реальных роботах и измеряет, как часто те успешно выполняют заданные задачи.
проверено по: xdof.ai ↗
См. также
- DROIDБольшой открытый набор данных для обучения роботов-манипуляторов (Distributed Robot Interaction Dataset). В нём собраны записи демонстраций: оператор дистанционно управляет рукой Franka Panda, и она выполняет разные задачи в реальных домах, офисах и лабораториях. Каждая запись содержит видео с нескольких камер, данные о глубине и текстовое описание задачи. Набор собрал консорциум университетских и промышленных лабораторий, чтобы модели управления роботами лучше работали в незнакомой обстановке.
- LeRobotLeRobot — открытая библиотека Hugging Face на PyTorch для робототехники: управление реальными роботами (от недорогих манипуляторов до гуманоидов), сбор данных, обучение и запуск политик управления. Она задаёт общий формат датасетов LeRobotDataset, которые можно выкладывать на Hugging Face Hub, и включает готовые политики — от лёгких вроде ACT до крупных моделей «зрение–язык–действие».
- Physical IntelligenceАмериканский стартап из Сан-Франциско, который разрабатывает универсальные модели для управления роботами разных типов. Это модели класса «зрение — язык — действие» семейства π: они получают изображения с камер и команду на естественном языке и выдают движения робота. Часть моделей и код компания публикует открыто.
- π0.5Модель «зрение — язык — действие» (vision-language-action, VLA) компании Physical Intelligence. Она получает изображения с камер робота и команду на естественном языке и выдаёт его движения. Построена на основе π0, но в отличие от неё обучена сразу на разнородных данных: записях с разных роботов, данных из интернета, распознавании объектов и разбиении задачи на подзадачи. Поэтому она справляется с длинными бытовыми задачами, например уборкой посуды или заправкой кровати, в домах, которых не было в обучающих данных.
В новостях
GPT-6.2 Astra справилась в 41,2% попыток в тесте на управление роботами
Компания, которая собирает данные для обучения роботов и испытывает ИИ-модели на реальных роботах.