Ученые из Джорджии представили новаторскую систему EgoMimic, которая улучшает подход к обучению роботов с использованием имитации человеческих действий. Этот метод позволяет роботам эффективно осваивать сложные задачи, такие как уборка или приготовление пищи, путем наблюдения за действиями человека и копирования их.
Традиционные методы обучения роботов, использующие видео или данные с датчиков, часто ограничены и не позволяют машинам адаптироваться к новым задачам. EgoMimic решает эту проблему, предоставляя более гибкую и масштабируемую платформу для сбора данных о действиях человека с его точки зрения (эгоцентрические видео). Это позволяет роботам не только повторять действия, но и обобщать навыки на новые задачи, которых они не встречали во время обучения.
Система EgoMimic включает несколько компонентов, включая носимые очки Project Aria для записи видео с точки зрения человека, а также роботизированную систему с двумя манипуляторами, которые используют камеры для захвата движения рук. Эти технологии минимизируют различие между тем, как человек и робот видят выполнение задач, что способствует лучшему обучению.
В экспериментах робот успешно выполнил несколько реальных задач, таких как сбор игрушек и упаковка продуктов, показывая превосходные результаты по сравнению с предыдущими методами. Метод также оказался более универсальным, позволяя роботам эффективно применять полученные знания в новых условиях.
