Facebook AI Research (FAIR) представляет эволюцию в обучении роботов ИИ: Habitat 3.0.
FAIR стремится преодолеть разрыв между ИИ и физическим миром, создавая агентов ИИ, способных понимать окружающую среду и сотрудничать с людьми.
Среда обитания 3.0 служит виртуальной тренировочной площадкой для создания воплощенные агенты ИИРоботы и виртуальные люди могут совместно выполнять задания в цифровой среде.
Сегодня мы анонсируем Habitat 3.0, Habitat Synthetic Scenes Dataset и HomeRobot - три важных достижения в разработке социальных воплощенных агентов ИИ, которые могут сотрудничать с людьми и помогать им в решении повседневных задач.
Более подробная информация об этих объявлениях ➡️ https://t.co/WGSjkkyQx3 pic.twitter.com/GdU54AD0qg
- AI at Meta (@AIatMeta) 20 октября 2023 года
Обучение роботов в реальном мире может быть сложным, длительным и потенциально опасным. Айзек Сим из Nvidia это известная система виртуального обучения для промышленной робототехники, но Habitat от Meta больше ориентирована на домашние условия.
Роботы могут совершать ошибки без реальных последствий, проводя обучение в симулированной неразрушающей среде, такой как Habitat 3.0.
Под капотом Habitat 3.0
Предыдущие итерации Habitat заложили основу для навигации и взаимодействия роботов в цифровой среде, похожей на дом.
Однако в Habitat 3.0 представлена модель совместной работы, включающая в себя как роботов, так и аватары гуманоидов для моделирования реальных сценариев взаимодействия человека и робота.
FAIR утверждает, что новая платформа - это не только движение и взаимодействие, она также учитывает визуальные и семантические детали реальных задач, используя аватары-гуманоиды с естественными движениями и поведением.
Эти аватары могут управляться как заданными алгоритмами, так и реальными человеческими действиями.
Новая платформа FAIR Habitat позволяет:
- Совместная работа человека и робота в симулированной домашней обстановке. Здесь роботы могут научиться работать вместе с аватарами людей, осваивая такие задачи, как уборка дома.
- Реалистичное взаимодействие с аватарами-людьми с естественными движениями и внешним видом, имитирующими взаимодействие в реальном мире.
- Оценка "человек в контуре", когда реальные люди могут взаимодействовать и управлять аватарами с помощью различных интерфейсов, включая клавиатуры, мыши и даже VR-гарнитуры.
По словам Меты, платформа обладает рядом преимуществ по сравнению с традиционными методами обучения роботов:
- Более быстрое обучение алгоритмов подкрепления, позволяющее проводить эксперименты, на которые в реальных условиях ушли бы годы, за считанные дни.
- Быстрая и плавная адаптация к условиям окружающей среды, устраняющая логистические проблемы, такие как физическое перемещение роботов.
- Более безопасный полигон для тестирования, гарантирующий, что модели ИИ не будут представлять угрозы в реальных сценариях.
Вместе с Habitat 3.0 FAIR также выпустила набор данных Habitat Synthetic Scenes Dataset (HSSD-200).
Этот набор данных включает в себя более 18 000 объектов и обеспечивает роботам более аутентичную среду для обучения, которая в точности повторяет реальные сценарии.
FAIR признает, что настоящие социально интеллектуальные роботы должны понимать динамическую среду, в которой живут люди.
На следующем этапе исследований будут использованы возможности Habitat 3.0 для дальнейшего совершенствования моделей искусственного интеллекта для более эффективного взаимодействия человека и робота.