Google DeepMind представила Gemini Robotics 2, модель для управления роботами

Google DeepMind представила Gemini Robotics 2, модель для управления роботами

Раньше Gemini в основном управляла руками робота за столом. Теперь гуманоид может ходить, приседать, наклоняться, сохранять равновесие и одновременно работать с предметами.

Например, робот Apollo 2 понимает просьбу убрать лейку на нижнюю полку. Он сам подходит к столу, берет предмет, идет к шкафу и кладет его в нужное место.

Модель управляет роботом от ног до пальцев. Она умеет завязывать пакеты, закрывать зиплоки, вкручивать лампочки и работать инструментами.

Gemini Robotics ER 2 выступает в роли мозга. Она анализирует помещение, разбивает задачу на сотни действий, следит за результатом и исправляет ошибки в процессе.

Появилась и совместная работа нескольких роботов. Они могут распределять действия и выполнять длинные задачи, с которыми один робот не справился бы.

Отдельная модель Gemini Robotics On-Device 2 работает прямо на устройстве без интернета. Ее можно адаптировать под новое тело робота за несколько часов, используя менее 200 примеров.

Пока сложные действия пальцами остаются проблемой. Например, открутить лампочку робот смог в 92 процентах случаев, а завязать пакет только в 44 процентах.