Вместо предварительного программирования действий, робота по имени Reachy от французского стартапа Pollen Robotics, научили повторять действия за людьми, которые они делают в виртуальной реальности. Гарнитура и контроллеры VR позволяют управлять роботом направления и видеть действия с его точки зрения. С ним можно, например, складывать кубики или с его помощью дистанционно налить кому-то воды. Reachy представили на конференции CES 2021, а презентация работа доступна на YouTube-канале разработчиков.
Кто такой Reachy?
Впервые работа представили на конференции CES 2020. Это интерактивный гуманоидный робот с открытым исходным кодом, которого можно запрограммировать работать, например, в сфере услуг. В два разноразмерных глаза Reachy встроенные камеры, с которыми он может определять объекты, запоминать людей и распознавать позы. С людьми он общается двигая головой, благодаря специальному шейному «суставу», который позволяет работу, например, наклонить голову от удивления или смущения.
Большей эмоциональности добавляют две антенны на голове, которые также двигаются. При желании, с роботом можно будет даже пообщаться: у него есть микрофон и динамики. Также Reachy имеет две руки, размером с руку взрослого человека, а также 7 степеней свободы движения.
Каждая рука может поднимать предметы весом до 500 граммов и довольно ловко ими управлять; при необходимости их можно переоснастить другими манипуляторами, например, зажимами для захвата или пятипалыми руками. Вообще Reachy одет в полосатую «рубашку», однако, по словам разработчиков, его можно полностью кастомизировать, изменив модуль.
С предметами Reachy взаимодействует через подставку, на которую поставили его туловище (фактически — его половину), а для работы ему нужны четыре винта и стандартная вилка питания.
Разработчики также предлагают три варианта сборки работа: Reachy классический, без головы и с одной рукой, Reachy эмоциональный, уже с головой и Reachy продвинутый, и с головой, и с обеими руками. В полной сборке Reachy весит 7 килограммов.
Что он умеет делать робот Reachy?
В прошлом году, когда разработчики только представили Reachy, его позиционировали как автономного робота, который может сыграть с вами в крестики-нолики, нарисовать улыбку, угостить кофе или встречать людей в гостинице. Он полагается на свои камеры, машинное обучение для распознавания и анализа окружающей среды и алгоритмы машинного обучения.
Кстати, для игры с Reachy в крестики-нолики, разработчики просят предварительно очистить доску, а также не жульничать, иначе робот выполнит перестановочный ход, сбросит игру и и станет ждать когда доска будет снова пустая.
Зачем Reachy повторять за другими?
Пока автономные роботы еще не умеют выполнять задачи, которые выходят за пределы предварительно запрограммированных или не соприкасаются с ними, разработчики предлагают им пока повторять движения непосредственно с людьми. Так и Reachy этого года получил обновление — теперь им можно будет управлять с помощью виртуальной реальности.
Через гарнитуру VR пользователь может видеть то, что видит робот через свои камеры и управлять его руками с помощью контроллеров. В презентационном видео, робот запустил микроволновку, налил воды и сложил кубики. По словам разработчиков, такой способ управления можно использовать и для обучения Reachy, например, для выполнения сложных задач, требующих точной моторики. Это позволит не программировать эти движения с нуля вручную.
