Во вторник компания Google DeepMind представила новую языковую модель под названием Близнецы робототехники на устройстве, которая позволяет выполнять задачи локально на роботах без необходимости подключения к Интернету.
Разработанная на основе предыдущей модели близнецы робототехники, выпущенной в марте, Близнецы робототехники на устройство может управлять движениями робота. Разработчики могут контролировать и настраивать модель в соответствии с различными потребностями, используя подсказки на естественном языке.
В бенчмарках Гугл утверждает, что модель работает на уровне, близком к облачной модели близнецы робототехника. Компания утверждает, что она превосходит другие модели на устройстве в общих бенчмарках, хотя и не называет эти модели.
В демонстрации компания показала роботов, работающих на этой локальной модели, которые выполняют такие действия, как расстегивание сумок и складывание одежды. Гугл сообщает, что, хотя модель была обучена для роботов Алоха, позже она адаптировала ее для работы на двуруком роботе Франка fr3 имеют и гуманоидном роботе Аполлон от Apptronik.
компания Google утверждает, что двухрычажный Франка fr3 имеют успешно справился с задачами и объектами, которые он «не видел» раньше, например, со сборкой на промышленном конвейере.
компания Google DeepMind также выпускает Близнецы робототехника СДК. Компания заявила, что разработчики могут показать роботам от 50 до 100 демонстраций задач, чтобы обучить их новым задачам, используя эти модели на физическом симуляторе MuJoCo.
Другие разработчики моделей ИИ также пробуют свои силы в робототехнике. Nvidia создает платформу для создания бизнес-моделей для гуманоидов; Обнимающее лицо не только разрабатывает скрытые модели и наборы данных для роботехники, но и работает над собой; поддерживаемый Мировым сообществом актив корейский стартап RLWRLD работает над созданием бизнес-модели для рабочих.