Гаджет может читать надписи на упаковках и выбирать наиболее свежие продукты, а также ориентироваться в пространстве.
Российские специалисты создали уникального робота-поводыря – кроме машинного зрения устройство использует языковую модель для чтения указателей, надписей на упаковках в магазинах. По словам разработчиков, уже собран прототип и протестированы все основные механики. Целевая аудитория — люди с нарушениями зрения. Эксперты полагают, что задумка выглядит интересной, но для ее реализации понадобится гораздо больше средств, чем планируют создатели.
— Робот предназначен для помощи людям с ограниченными возможностями — с нарушениями зрения. Он представляет собой решение, способное анализировать визуальные данные, полученные от машинного зрения, и использовать языковые модели GPT для интерпретации и генерации соответствующих команд или предупреждений, — сообщил автор проекта Богдан Колесник.
Устройство способно выполнять сразу несколько задач. Одна из них — навигация. Благодаря машинному зрению и языковым моделям GPT подвижная платформа может оптимально выбирать маршруты и избегать препятствий на своем пути, обеспечивая безопасность и эффективность передвижения, утверждают разработчики. Оно также способно определять и идентифицировать различные объекты в окружающей среде. Кроме того, аппарат может читать и распознавать тексты, подчеркнули авторы проекта.
