25 червня Google DeepMind представив нову мовну модель Gemini Robotics On-Device. Ця розробка є продовженням березневого релізу Gemini Robotics. Вона відзначається тим, що може працювати без підключення до Інтернету, прямо на пристрої.
Що відомо про Gemini Robotics On-Device
Головна мета цього проєкту дати роботам змогу виконувати складні дії автономно, без залежності від хмарних обчислень. Серед показаних прикладів – розстібання блискавок, складання одягу, а також робота з предметами на промисловому конвеєрі. У демонстраціях локальна модель успішно керувала діями таких роботів, як дворукавний Franka FR3 та гуманоїд Apollo від Apptronik.
Цікаво, що нова версія моделі зберігає рівень ефективності, близький до хмарного Gemini Robotics, що вказує на потужну оптимізацію обчислень для роботи на пристрої. У бенчмарках, за словами Google, Gemini On-Device перевершує інші локальні моделі, хоча компанія не розкриває, з якими саме конкурентами проводилося порівняння.
Для розробників Google також випускає Gemini Robotics SDK, що дозволяє навчати роботів новим діям шляхом демонстрацій. За допомогою фізичного симулятора MuJoCo, розробники можуть показати від 50 до 100 прикладів, і модель навчиться повторювати завдання у реальному середовищі.