Исследователи Стэнфордского университета представили HumanPlus — проект открытого робота, который использует нейросеть для повторения движений за человеком. Особенность робота в том, что он может выполнять действия самостоятельно. Для этого ему надо повторить движение около 40 раз. С вероятностью 60-100% система запомнит его и внесёт в память.
Проект HumanPlus обучали на датасете из 40 часов видео с движениями человека. Этого набора данных хватило, чтобы система освоила управление конечностями робота. Также относительно небольшой датасет позволил научить устройство в реальном времени обрабатывать изображения с камеры и повторять действия на них. Автономное воспроизведение навыков пока происходит медленно, поэтому демонстрационные ролики исследователи ускорили.
Авторы проекта опубликовали список используемого железа с ссылками на продавцов. За основу HumanPlus взяли готового робота Unitree H1 за 90 тыс. долларов и доработали его. Закупка всего оборудования по смете обошлась в 108 тыс. долларов, а некоторые детали пришлось изготовить с помощью 3D-печати.
Исследователи полностью открыли проект, поэтому все желающие могут собрать такого робота и доработать под собственные задачи. Доступен датасет, код и полный текст исследовательской работы. Демонстрационные ролики опубликовали на странице HumanPlus.