Робот TIAGo умеет искать путь к холодильнику, открывать его и приносить оттуда пиво, которое заказал человек.
На сайте ChallengeRocket в описании проекта робота говорится, что он был совмещен с компьютером NVIDIA Jetson TX2, который использовался в качестве зрительной системы. С помощью него гуманоид может построить маршрут до холодильника, найти его ручку, а также выбрать пиво нужной марки из нескольких, которые находятся в холодильнике.
Перед экспериментом робот прошел обучение: ему показали 60 изображений бутылок на 20 разных фонах. Для этого ученые использовали алгоритм семантической сегментации: он позволял TIAGo выделять объекты на общем фоне и классифицировать их по форме.