Израильская компания Mentee Robotics представила андроида Menteebot, предназначенного для работы в бытовых условиях и складских объектах.
Производители описывают его как робота, оснащенного искусственным интеллектом и способного выполнять сложные задачи.
Mentee выпустила видеоролик, в котором андроид получает словесную команду и выполняет поставленную задачу. Ответ робота включает в себя локомоцию, ориентацию в пространстве, а также обнаружение объектов и манипулирование ими.
По словам представителей компании, Menteebot использует ИИ поэтапно.
Сначала для интерпретации команд и продумывания необходимых шагов для выполнения задачи используются большие языковые модели.
Затем, задействуя алгоритмы на основе NeRF, он строит когнитивную 3D-карту окружающей среды в режиме реального времени, дополненную семантической информацией об объектах и предметах. Далее он локализует себя в пространстве и планирует траекторию, чтобы избежать препятствий.
Наконец, андроид выполняет запланированные шаги по намеченному пути с помощью подхода машинного обучения Sim2Real, который определяет требуемую локомоцию в виртуальной среде и осуществляет ее в реальном мире с помощью походки и движений рук.
«Мы находимся на пороге слияния компьютерного зрения, понимания естественного языка, а также методологии перехода от симуляции к реальному миру», — заявил соучредитель компании Амнон Шашуа. Разработчики утверждают, что окончательную версию гуманоида, готовую к производству, оснастят камерой, собственными электродвигателями, поддерживающими «беспрецедентную ловкость», и полностью
