Интеграция ИИ-моделей NVIDIA в открытую библиотеку LeRobot от Hugging Face

Развитие искусственного интеллекта в программной среде показало, насколько быстро сообщество может внедрять инновации, когда модели, данные и инструменты находятся в открытом доступе. Теперь этот успешный подход переносится в сферу физического искусственного интеллекта (physical AI). Компании NVIDIA и Hugging Face объявили о масштабном сотрудничестве, в рамках которого передовые модели и фреймворки NVIDIA интегрируются в LeRobot — открытую библиотеку Hugging Face для робототехники.

Это партнерство решает фундаментальную проблему индустрии. До сих пор развитие робототехники сдерживалось высокой стоимостью и раздробленностью ресурсов. В отличие от языковых моделей, которым нужен только текст, роботам требуется понимание физики, гравитации и пространственного расположения объектов. Разработчикам приходилось самостоятельно собирать огромные наборы данных, настраивать сложные среды симуляции и искать вычислительные мощности. Теперь этот барьер существенно снижается благодаря стандартизации.

Основой интеграции стали несколько ключевых продуктов NVIDIA. Первый из них — NVIDIA Isaac GR00T 1.7. Это открытая базовая визуально-языковая модель действий (vision-language-action, VLA), созданная специально для человекоподобных роботов. Архитектура VLA позволяет роботу получать изображение с камер, принимать текстовую команду от человека и напрямую преобразовывать их в физические действия моторов. Интеграция в LeRobot позволяет разработчикам адаптировать поведение машин под новые физические оболочки, используя стандартизированные рабочие процессы.

Второй важный компонент — фреймворк NVIDIA Isaac Teleop. Сбор данных для обучения роботов всегда был трудоемким процессом. Isaac Teleop автоматизирует и стандартизирует сбор высококачественных демонстраций от людей-операторов. Разработчики могут использовать внешние устройства для управления роботом, записывать эти действия в унифицированных форматах, а затем легко делиться полученными наборами данных с мировым сообществом.

В ближайшем будущем ожидается интеграция NVIDIA Cosmos 3. Это передовая базовая модель мира (world model) для физического ИИ. Модели мира играют критическую роль в современной робототехнике, поскольку позволяют алгоритму понимать физические законы и предсказывать последствия своих действий. Это дает возможность генерировать синтетические данные и симулировать различные сценарии, что особенно важно, когда сбор реальных данных обходится слишком дорого или физически опасен.

Текущие обновления опираются на уже существующую базу совместных проектов. Ранее NVIDIA предоставила сообществу крупнейший открытый набор данных для физического ИИ, который был скачан более пятнадцати миллионов раз. Он включает сотни тысяч реальных и симулированных траекторий движения и десятки миллионов примеров правильного захвата объектов.

Кроме того, разработчикам уже доступны среды симуляции на базе NVIDIA Isaac Sim и Isaac Lab. С помощью платформы Isaac Lab-Arena в экосистеме LeRobot инженеры могут быстро создавать прототипы сложных виртуальных сред для тестирования поведения роботов перед их переносом на реальное железо. Также реализована поддержка аппаратной платформы NVIDIA Jetson Thor для управления роботами с открытым исходным кодом.

Объединение аудиторий двух компаний создает мощный сетевой эффект (network effect). Три миллиона разработчиков робототехники экосистемы NVIDIA получают прямой канал взаимодействия с шестнадцатью миллионами специалистов по ИИ на платформе Hugging Face. Это формирует единый стандартизированный конвейер для сквозной разработки.

В долгосрочной перспективе перенос передовых исследований в открытый доступ ускорит появление универсальных роботов. Когда инженеры по всему миру могут изучать, адаптировать и достраивать одни и те же базовые модели, индустрия переходит от создания узкоспециализированных машин к разработке гибких платформ, способных обучаться новым задачам в реальном времени.