Google DeepMind анонсировала семейство моделей Gemini Robotics 2 – оно предназначено для управления гуманоидными роботами. Система расширяет возможности машин: теперь они могут координировать движения тела, анализировать обстановку, планировать действия и взаимодействовать друг с другом при выполнении общей задачи.
В линейку вошли три модели с разными функциями:
- Gemini Robotics 2 отвечает за управление движениями;
- Gemini Robotics ER 2 занимается восприятием окружающей среды, анализом и планированием;
- Gemini Robotics On-Device 2 работает на самом роботе без постоянного подключения к облачным сервисам.
Gemini Robotics способна контролировать все движения робота одновременно. Если предыдущие версии в основном управляли руками и верхней частью корпуса, то теперь система синхронизирует ходьбу, наклоны, приседания, удержание равновесия и работу кистей.
В результате роботы могут выполнять более сложные бытовые и производственные операции: например, вкручивать лампочки, завязывать пакеты или работать с небольшими деталями, однако разработчики признают, что скорость и аккуратность выполнения таких действий еще требуют доработки.
Также обновленная модель стала лучше справляться с многоэтапными задачами. Она непрерывно анализирует видеопоток с камер, оценивает ход выполнения работы, при необходимости корректирует свои действия и может распределять обязанности между несколькими роботами с разной конструкцией.
Модель Gemini Robotics ER 2 доступна разработчикам в виде предварительной версии через Gemini API и Google AI Studio. Остальные компоненты нового семейства пока тестируются в рамках программы раннего доступа совместно с компаниями Apptronik, Agile Robots и Boston Dynamics.
Комментарии