Physical Intelligence
Американский стартап из Сан-Франциско, который разрабатывает универсальные модели для управления роботами разных типов. Это модели класса «зрение — язык — действие» семейства π: они получают изображения с камер и команду на естественном языке и выдают движения робота. Часть моделей и код компания публикует открыто.
проверено по: pi.website ↗
См. также
- Skild AIАмериканский стартап из Питтсбурга, основанный выходцами из Университета Карнеги — Меллона; разрабатывает универсальную базовую модель для робототехники — «мозг», способный управлять роботами разной конструкции: манипуляторами, четвероногими и человекоподобными.
- Dyna RoboticsАмериканский стартап из Редвуд-Сити (Калифорния), который разрабатывает роботов-манипуляторов и фундаментальные модели для управления ими. Его системы автоматизируют рутинный ручной труд: складывают бельё и салфетки, обрабатывают складские заказы, убирают номера в гостиницах, работают на кухнях. Компанию основали в 2024 году Линдон Гао и Йорк Янг, создатели Caper AI, и Джейсон Ма, ранее работавший исследователем в DeepMind.
- Физический ИИСистемы ИИ, которые воспринимают реальный мир и действуют в нём через устройства: роботов, беспилотные автомобили, промышленные машины. В отличие от чат-ботов и других моделей, которые работают только с текстом и изображениями, такие системы должны учитывать пространство и физику. Обучают их обычно в физических симуляциях и на синтетических данных, часто с помощью обучения с подкреплением.
- LeRobotLeRobot — открытая библиотека Hugging Face на PyTorch для робототехники: управление реальными роботами (от недорогих манипуляторов до гуманоидов), сбор данных, обучение и запуск политик управления. Она задаёт общий формат датасетов LeRobotDataset, которые можно выкладывать на Hugging Face Hub, и включает готовые политики — от лёгких вроде ACT до крупных моделей «зрение–язык–действие».
- DROIDБольшой открытый набор данных для обучения роботов-манипуляторов (Distributed Robot Interaction Dataset). В нём собраны записи демонстраций: оператор дистанционно управляет рукой Franka Panda, и она выполняет разные задачи в реальных домах, офисах и лабораториях. Каждая запись содержит видео с нескольких камер, данные о глубине и текстовое описание задачи. Набор собрал консорциум университетских и промышленных лабораторий, чтобы модели управления роботами лучше работали в незнакомой обстановке.
- ApptronikАмериканская робототехническая компания из Остина (Техас), выросшая из лаборатории Техасского университета. Разрабатывает человекоподобного робота Apollo для работы на заводах и складах рядом с людьми и сотрудничает с Google DeepMind.
В новостях
Челси Финн считает, что роботам не хватает общего рецепта дообучения
Стартап из Сан-Франциско, который разрабатывает универсальные модели для управления роботами разных типов: модель получает изображение с камер и команду словами и выдаёт движения.