Шесть человекоподобных роботов AgiBot G2 отработали в магазине в Шанхае 24 часа, выполнив 1730 задач

Компания AgiBot представила Genie Master — фреймворк воплощенного агента, который позволяет роботам продолжать совершенствоваться после развертывания, вместо того чтобы ждать, пока инженеры проведут повторное обучение. Компания утверждает, что роботы G2, использующие этот фреймворк, работали в реальном магазине у дома, выполняя задачи по упаковке готовых блюд, подбору товаров и пополнению полок, а также обнаруживая и устраняя собственные режимы сбоев без участия человека в процессе обучения.

AgiBot описывает полученный результат как первое подтверждение концепции, которую они называют Физическое RSI, или воплощенное рекурсивное самосовершенствование, вне симуляционных и лабораторных условий. Один из примеров, представленных на презентации, заключался в том, что робот неоднократно пропускал небольшой крючок на полке из-за того, что ценник загораживал обзор с камеры головы. Проанализировав собственные журналы выполнения, агент определил проблему, изменил подход, поднеся левую руку ближе, чтобы камера запястья могла подтвердить положение крючка, затем взял товар правой рукой и сохранил это исправление для последующего использования.

Этот фреймворк основан на Протоколе воплощенного выполнения (EEP) — унифицированном интерфейсе между агентом и роботом. Он состоит из четырех компонентов: интерфейса возможностей, который сообщает агенту, что робот способен делать; интерфейса руководства для передачи пространственных подсказок, ссылок на объекты и детальных инструкций политике действий; интерфейса обратной связи, который сообщает о физическом результате; и интерфейса непрерывности, который отслеживает прогресс и зависимости задач в рамках всего парка роботов, позволяя возобновить или перепланировать работу после перерывов.

Когда задачи постоянно терпят неудачу или выполняются медленно, агент планирует целенаправленную практику в часы наименьшей загруженности магазина. Улучшение происходит по двум направлениям. RSI, не затрагивающий веса модели, уточняет подсказки, память и правила выполнения, используя ежедневный анализ успехов и неудач для создания того, что команда сравнивает с блокнотом исправленных ошибок. Политика RSI собирает данные из автономных запусков, случаев вмешательства человека и восстановления, фильтрует и перевзвешивает их, а затем переобучает базовую политику действий с использованием обучения с учителем, имитации или подкрепления. AgiBot отмечает, что второй трек все еще использует данные о вмешательстве человека и обучение модели, поэтому люди полностью не исключаются.

Genie Master является четвертым элементом серии релизов AI WAVE от AgiBot, которая началась 22 октября. Согласно опубликованному графику компании, следующим пунктом на 28 октября станет обновление платформы симуляции Genie Sim с внутренним физическим движком, предназначенным для симуляции деформируемых объектов, что, по словам AgiBot, достигает более 95% согласованности между реальными и смоделированными результатами в сложных задачах. Более подробная информация на момент написания не была опубликована.

Публичное тестирование запланировано на 2 и 3 ноября, когда шесть роботов G2 будут работать в течение 24 часов в режиме реального времени в магазине у дома, охватывая пиковые часы обеда и ужина, ночную смену и подготовку к завтраку.

Робот AgiBot G2 Max начал свою работу на складе JD Logistics. Этот робот, который был официально представлен 26 октября как воплощенный робот с рейтингом безопасности и способностью работать с тяжелыми грузами, занимается обработкой входящих коробок на роботизированном складе JD Logistics, известном как склад Smart Wolf, согласно данным IT Home и Sina Finance.

На этапе приема товара G2 Max снимает коробки с прибывающих паллет и штабелирует их для автоматизированной системы. По утверждению AgiBot, он способен снимать с паллет 80 коробок в час и укладывать на паллеты 75 коробок в час, при этом общий процент успешности превышает 99%. Робот функционирует круглосуточно на нескольких производственных линиях.

Склад Smart Wolf является собственной разработкой JD Logistics для системы товаров к человеку. Он использует вертикальное пространство высотой 12 метров, что увеличивает эффективность хранения в шесть раз по сравнению с традиционными складами, и одновременно управляет сотнями роботов. Обработка входящего потока является начальным этапом этой цепочки, поэтому его темп и стабильность влияют на все последующие процессы, от хранения до сортировки, особенно в текущий сезон пиковых покупок.

JD Logistics и AgiBot впервые продемонстрировали G2 Max вместе на Всемирной конференции по искусственному интеллекту в июле, тогда они объявили о его внедрении на склад Smart Wolf. Официальный запуск продукта AgiBot состоялся 26 октября.

G2 Max спроектирован для работы с тяжелыми грузами. Каждый манипулятор способен нести 20 килограммов, а оба манипулятора вместе рассчитаны на 40 килограммов, при этом пиковая нагрузка составляет 50 килограммов. Точность повторного позиционирования находится в пределах 0,5 миллиметра. Благодаря шарниру в талии, позволяющему роботу изгибаться посередине, он может интегрироваться в существующие промышленные линии, не требуя оставления за собой свободного пространства в 1,5 метра для поворота. Это критически важно там, где линии уже установлены для персонала.

AgiBot предлагает этот робот для задач снятия с паллет, перемещения материалов и подачи на линию на фабриках, заявляя, что он может работать непрерывно без смен или ночного персонала. Руководитель JD Logistics отметил, что реальные промышленные площадки являются лучшим полигоном для воплощенного ИИ, и компания готова открывать свои объекты, тестовые среды, правила безопасности и стандарты обслуживания для большего числа производителей роботов.

Компания AgiBot установила мировой рекорд Гиннесса по количеству одновременно танцующих человекоподобных роботов, продемонстрировав синхронизированную программу с участием 110 полноразмерных роботов модели Expedition A3. Это событие состоялось 24 октября в Международном выставочно-конференц-центре на Желтой реке в городе Цзиньань.

Судья Гиннесса подтвердил количество в 110 единиц на месте проведения мероприятия, согласно сообщениям IT Home и Science and Technology Daily. При этом, по данным Science and Technology Daily, ключевым критерием для установления рекорда было не качество танца, а способность флотилии из более чем ста устройств завершить выступление без каких-либо ошибок.

Роботы выполнили несколько сетов сложных движений за период в 5 минут и 43 секунды, чередуя синхронное движение и изменение построений. AgiBot уточнила, что все 110 участвовавших роботов являются стандартными производственными единицами.

Технические аспекты координации

Ваан Чуан, партнер AgiBot и старший вице-президент, отметил, что управление сотней роботов выходит за рамки простого копирования движений; это требует полноценного стека планирования, который включает определение положения в реальном времени, распределенное принятие решений и динамическое избегание препятствий. Роботы самостоятельно вышли из транспортных коробок, откалибровали свои позиции и исполнили программу без ручного управления инженерами через дистанционное управление.

Координация осуществлялась с помощью LinkBots — внутренней системы многороботного планирования AgiBot. Ваан описал три ключевые возможности этой системы. Во-первых, изменения построений рассчитываются исходя из текущего состояния каждого робота, а не воспроизводятся из заранее сохраненных движений. Во-вторых, система ультраширокополосного позиционирования обеспечивает точность менее 10 сантиметров, позволяя роботам координировать ходьбу и бег, отслеживая взаимное расположение. В-третьих, отдельные группы могут получать различные инструкции, а оркестровка спроектирована таким образом, чтобы предотвратить вмешательство роботов друг в друга. IT Home сообщило, что система способна локально компенсировать выход из строя одной из единиц.

По словам Ваана, успешная реализация этих трех пунктов является технической границей, отделяющей человекоподобных роботов, используемых как демонстрационные экспонаты, от тех, которые могут выступать в роли продуктивных инструментов.

AgiBot сообщает, что роботы уже начинают применяться в реальной работе. В настоящее время они проходят испытания на станциях метро Цзиньаня, включая Олимпийский спортивный центр и улица Чжуаньшань Вест Роуд, где они предоставляют указания, помогают в управлении потоками людей, осуществляют патрулирование безопасности и культурное сопровождение. Компания планирует использовать роботов, участвовавших в попытке установить рекорд, в туристических представлениях, общественных службах, выставочных залах и образовании.