Подготовлено Дайджестом больших данных

Время от времени в мире технологий происходит прорыв, который полностью меняет наше представление о возможном.

Недавно Стэнфордский университет, Университет Беркли и команда Google DeepMind совместно разработали домашнего робота под названием «Mobile ALOHA».

На первый взгляд «Mobile ALOHA» кажется обычным домашним помощником, но вскоре вы обнаружите, что это нечто большее. Этот ИИ способен выполнять широкий спектр бытовых задач.

Стирка и уборка: от сортировки до стирки и даже складывания, «Mobile ALOHA» может стирать. Мало того, он также оснащен функцией вакуума, чтобы в комнате всегда было чисто и опрятно.

Помощь в садоводстве: снижает нагрузку на ежедневные работы в саду за счет полива и других методов, а также может помочь в вывозе мусора. ‍‍

Уход за домашними животными: Удивительно, но «Mobile ALOHA» также может взаимодействовать и играть с домашними животными, добавляя новое измерение к автоматизированному кормлению домашних животных.

В настоящее время робот доступен для покупки, а его программное обеспечение имеет открытый исходный код. ‍

‍Mobile АЛОХА: Освободите свои руки в работе по дому

Имя этого робота — Mobile ALOHA. Исследовательская группа из Стэнфорда построила его тремя людьми.

Бумажный адрес:

https://mobile-aloha.github.io/resources/mobile-aloha.pdf

Адрес проекта:

https://mobile-aloha.github.io/

Техническая документация: https://docs.google.com/document/d/1_3yhWjodSNNYlpxkRCPIlvIAaQ76Nqk2wsqhnEVM6Dc/edit.

Среди них Цзипэн Фу является соруководителем проекта. Он является докторантом компьютерных наук в Лаборатории искусственного интеллекта Стэнфордского университета под руководством профессора Челси Финн. Чжао также является докторантом компьютерных наук; Стэнфордский университет, и его научным руководителем также является Челси Финн. Все трое вместе работали над исследованием.

Mobile ALOHA — это небольшой робот на колесиках, по размеру похожий на устройство Amazon Alexa. Оснащенный камерой, микрофоном и динамиками, он может видеть, слышать и общаться с пользователями. Самой уникальной особенностью Mobile ALOHA является его мобильность – способность автономно перемещаться в помещении, используя передовые возможности компьютерного зрения.

Mobile ALOHA Ключевой инновацией являются достижения Google в области роботизированной навигации и картографирования.Mobile ALOHA может использовать камеры и датчики для идентификации мебели, предметов и стен и построения динамической карты внутренних помещений. Он способен позиционировать себя на карте и планировать оптимальные пути навигации. Машинное обучение позволяет роботам со временем улучшать свои картографические и навигационные возможности по мере сбора большего количества сенсорных данных.

на самом деле,Вот этотробот Одной из наиболее привлекательных особенностей является двойной режим работы.。он можетручное управление：Поддержка сложных операций дистанционного управления,Обеспечить точный контроль и возможности выполнения задач.。автоматическая функция：Возможно, самой новаторской особенностью является его способность работать автономно.,После ок. 50 После этой обучающей демонстрации робот смог самостоятельно выполнять сложные задачи, в том числе пользоваться лифтами и готовить еду.

В технических деталях Mobile ALOHA унаследовала преимущества оригинальной системы ALOHA, а именно недорогого, удобного и удобного в обслуживании устройства дистанционного управления с двумя руками, одновременно расширяя его функциональность за пределы настольного компьютера.

Что касается имитационного обучения,Mobile ALOHA воспользовался Трансформер (архитектура, используемая в больших языковых моделях).исходный ALOHA В системе используется метод, называемый Action Chunking with Transformers (ACT) архитектура, которая принимает изображения с нескольких точек зрения и совместных позиций в качестве входных данных и прогнозирует последовательность действий.

Кроме того, благодаря успеху генеративной модели MobileAloha может быстро учиться на человеческих демонстрациях и научиться чему-то одному всего за 50 демонстраций, а совместное обучение может увеличить вероятность успеха до 90%.

Генеративный искусственный интеллект и будущее робототехники

Превосходная производительность робота Mobile ALOHA неотделима от преимуществ некоторых ключевых технологий современных крупных моделей. Генеративный ИИ с пониманием играет две уникальные роли в исследованиях воплощенного ИИ и робототехники:

1. Генератор данных/опыта. Создавайте 2D-изображения, видео, 3D-сцены или корпус 4D (3D + время), необходимые для обучения роботов. Учитывая, что реальный опыт роботов (данные) чрезвычайно ценен, генеративный ИИ можно рассматривать как «симулятор обучения». Я твердо убежден, что без моделирования обучения и тестирования исследования в области робототехники не могут проводиться в больших масштабах.

2. Архитектура самообучения: генерация сенсорных данных, которые робот может наблюдать в будущем, и сравнение их с фактическими наблюдениями в качестве обучающего сигнала, не требующего маркировки.

Робототехника также обнаружила, что большие модели зрительно-речевых действий можно обучить, чтобы улучшить восприятие робота и контролировать движения его рук и ног. В настоящее время генеративный искусственный интеллект окажет революционное влияние на все области робототехники, от моделирования до проектирования. Например:

Симуляция. Модели ускорят разработку симуляций за счет создания сцен, среды и ресурсов, сокращая разрыв между техническими 3D-художниками и разработчиками. Ресурсы, созданные с помощью генеративного искусственного интеллекта, будут широко использоваться в синтезе данных, обучении навыкам роботов и тестировании программного обеспечения.

Мультимодальный ИИ: модели на основе трансформаторов улучшат способность роботов понимать окружающий мир, позволяя им работать в большем количестве сред и выполнять более сложные задачи.

(Пере)программирование роботов: у роботов появится больше возможностей определять задачи и функции простым языком, что сделает их более универсальными и многоцелевыми.

Конструкция: Инновационная механическая конструкция повысит эффективность, например, при разработке концевых эффекторов.

мобильный Появление ALOHA, несомненно, дало импульс отечественному рынку домашних роботов. Хотя он еще не идеален, как сказал Кен из Калифорнийского университета в Беркли, рынок домашних роботов огромен и необходим: «Я прогнозирую. что в ближайшие десять лет мы увидим более доступных домашних роботов, которые Способны помогать в ежедневной уборке, например собирать с пола одежду, игрушки и мусор и размещать их в специально отведенных местах. Хотя эти роботы иногда могут совершать ошибки, они обеспечат удобство семьям, особенно родителям и пожилым людям. их ограничения будут значительно превышены».