Зловещая долина: робот с GPT-4 делает селфи и играет метал (видео)

Еще ученые заставили робота подбрасывать мяч и есть несуществующий попкорн.

Alter3 — это новейшая версия робота-гуманоида, впервые представленного в 2016 году. Команда исследователей из Токийского университета использовала GPT-4, чтобы проводить робота через различные симуляции, такие как съемка селфи, подбрасывание мяча, поедание попкорна и игра на воздушной гитаре. Об этом сообщает TechXplore.

Раньше каждое действие требовало специального кодирования, но включение GPT-4 открывает новые возможности для роботов, которые учатся с помощью инструкций на естественном языке. Прямое управление теперь возможно путем отображения лингвистических выражений человеческих действий с помощью программного кода, объясняют ученые. Они назвали это достижение «сменой парадигмы».

Alter3, способный выполнять сложные движения верхней части тела, включая детальную мимику, имеет 43 оси, имитирующие опорно-двигательный аппарат человека. Он стоит на подставке, но не может ходить (хотя может имитировать ходьбу).

Кодирование координации такого большого количества суставов было масштабной задачей, включающей повторяющиеся движения. Благодаря языковой модели (LLM) пропала необходимость в итеративной работе. Теперь ученые могут просто предоставлять устные инструкции, описывающие желаемые движения, и доставлять подсказки для LLM. Языковая модель в свою очередь генерирует код Python, который запускает движок Android.