В Google разработали языковую модель для управления роботами

Исследователи из подразделения DeepMind компании Google разработали обширную языковую модель (LLM) SayTap для управления четвероногими работами. Система распознает языковые команды и превращает их в «паттерны контакта ног» — последовательность действий и способ, которым робопес ставит ноги на землю во время движения. Разработчики сообщают, что с использованием языковой модели система сможет понимать и распознавать обычные языковые команды. К примеру, работу можно будет приказать «сидеть», «бежать», «идти рядом» и так далее. При этом для управления не нужны специальные слова – система распознает приказ и превращает ее в понятную форму на основе анализа фразы, произнесенной в свободной форме. Работы-собаки понимают базовые инструкции и выполняют их. Но система SayTap будет работать даже с расплывчатыми формулировками. Например, система выполнила такие команды, как «Пойди, поймай эту белку на дереве», «Действуй так, как будто у тебя хромает задняя левая нога» или «Двигайся, как будто земля очень горячая».