Гуманоидный робот-помощник TIAGo, разработанный инженерами из Университета Кобленц-Ландау (Германия), научился самостоятельно находить путь к холодильнику, искать в нем пиво заданной марки и приносить хозяину.
Принцип работы устройства описан на сайте ChallengeRocket.
Команда оснастила робота PAL Robotics TIAGo зрительным центром в виде модульного суперкомпьютера NVIDIA Jetson TX2. Разработанный алгоритм семантической сегментации позволил машине выделять на общем фоне окружающие объекты и классифицировать их по форме.
В результате робот смог построить маршрут до холодильника, найти ручку и открыть его. Затем TIAGo заснял содержимое холодильника с помощью RGB-D камеры, сегментировал бутылки и банки, взял нужную и закрыл холодильник — хотя его единственная рука была занята пивом.
Чтобы обучить робота алгоритму, инженерам хватило всего 60 изображений бутылок на 20 различных фонах.
Читайте также: Робот Boston Dynamics снова стал объектом издевательств