Ученые создали говорящего робота-поводыря для незрячих

Ученые Бингемтонского университета в США разработали робота-поводыря, который не только сопровождает незрячих пользователей, но и объясняет происходящее вокруг в процессе движения, передает Kazinform со ссылкой на исследовательское учреждение.

Система основана на больших языковых моделях. Робот, выполненный в форме собаки-поводыря, заранее предлагает возможные маршруты, а во время движения озвучивает обстановку: предупреждает о препятствиях, поворотах и расстояниях. Это помогает компенсировать ограничения пространственного восприятия без зрительной информации.

Руководитель проекта доцент Школы вычислительных наук Ши-ци Чжан отметил, что в отличие от обычной собаки-поводыря, способной выполнять ограниченное число команд, робот с интеграцией GPT-4 получает значительно более широкие возможности взаимодействия.

В эксперименте участвовали семь незрячих добровольцев. Им предлагалось самостоятельно добраться до переговорной комнаты в офисном здании. Робот уточнял пункт назначения, предлагал несколько маршрутов с указанием времени в пути, а затем сопровождал пользователя, комментируя окружающую среду. Участники высоко оценили сочетание предварительного планирования и голосового сопровождения в реальном времени.

Разработчики планируют продолжить тестирование, повысить автономность системы и адаптировать ее для длительных маршрутов как в помещениях, так и на улице. В перспективе такие решения могут стать частью повседневной жизни незрячих людей.