Нейронная сеть Neuron AI научит роботов видеть, слышать, осязать и запоминать / Все новости / Главная

Немецкая компания NEURA Robotics представила Neuron AI — модель искусственного интеллекта, которая объединяет зрение, осязание, слух, языковые данные и память, чтобы роботы могли лучше понимать окружающую обстановку и самостоятельно выполнять многоэтапные задачи. Разработчики рассчитывают использовать систему в разных роботизированных платформах, включая человекоподобных роботов, и адаптировать её к самым разным практическим сценариям.

Главная идея заключается в том, чтобы научить робота не просто реагировать на изображение с камеры, а воспринимать происходящее комплексно. Ведь в реальном мире далеко не всё можно понять, глядя на предмет: иногда нужно прикоснуться к нему, услышать характерный звук или вспомнить, что происходило с ним несколько секунд назад.

Как работает Neuron AI

NEURA Robotics описывает свою разработку как модель типа Perception-Language-Action (PLA) — «восприятие — язык — действие». Она объединяет сенсорные данные и информацию о состоянии самого робота, а затем использует их для выбора физических действий.

В систему поступают несколько типов информации:

  • Трёхмерное зрение. Робот определяет расположение предметов в пространстве, оценивает их форму и положение относительно себя.
  • Осязание и измерение усилий. Тактильные датчики и датчики силы помогают определять, насколько сильно робот давит на объект и что происходит в момент контакта.
  • Звуковое восприятие. Аудиосигналы позволяют распознавать характерные звуки, сопровождающие механические действия.
  • Язык. Текстовые и языковые данные помогают связывать команды с необходимыми действиями.
  • Информация о состоянии робота. Положение суставов и другие параметры движения позволяют системе учитывать собственные физические возможности и текущее положение.
  • Память. Система сохраняет контекст предыдущих событий, чтобы использовать его на последующих этапах работы.

Важная особенность архитектуры — согласование разных типов данных во времени. Благодаря этому робот может сопоставлять увиденное с тем, что он почувствовал или услышал, и учитывать последовательность собственных действий.

Представим, что робот закручивает винт. Одного изображения недостаточно, чтобы уверенно определить, правильно ли он вошёл в резьбу. Изменение усилия при вращении может подсказать, что соединение получилось неправильным. Аналогично характерный щелчок способен указывать на то, что механическая защёлка закрылась.

Это примеры предполагаемого применения технологии, а не результаты независимых испытаний именно Neuron AI.

Зачем роботу слух, осязание и память

Многие современные роботизированные системы в значительной степени опираются на камеры и визуальное распознавание. Такой подход хорошо работает в предсказуемой обстановке, но может создавать трудности, когда предметы перекрывают друг друга, контакт происходит вне поля зрения или действие требует нескольких последовательных операций.

Neuron AI призвана уменьшить зависимость от одного источника информации.

Например, если предмет временно исчез из поля зрения камеры, робот сможет использовать сохранённые сведения о его положении и предыдущих действиях. А если результат физического контакта нельзя определить по изображению, дополнительные сенсорные данные помогут оценить, что произошло на самом деле.

Память особенно важна для сложных задач, в которых недостаточно выполнить одно действие и немедленно забыть о нём. Роботу необходимо сохранять контекст, отслеживать промежуточные результаты и использовать их при переходе к следующему этапу.

Такой подход может сделать автоматизацию более гибкой: вместо создания отдельной системы управления для каждой операции разработчики смогут адаптировать общую модель под разные задачи.

Одна модель для нескольких типов роботов

NEURA Robotics намерена применять Neuron AI сразу на нескольких роботизированных платформах. Среди заявленных вариантов — человекоподобные роботы 4NE1 третьего и четвёртого поколений, колёсная платформа 4NE1, а также две другие платформы с двумя роботизированными руками.

Перенос навыков между разными аппаратными конфигурациями — важная задача для развития робототехники. Если модель научилась выполнять определённую последовательность действий на одной платформе, разработчики стремятся адаптировать этот навык к другому роботу, не начиная обучение с нуля.

При этом каждой машине всё равно необходимо учитывать особенности собственной конструкции: количество суставов, диапазон движений, характеристики приводов и возможности манипуляторов.

Ещё одна заявленная особенность Neuron AI — возможность выполнять вычисления непосредственно на роботе, без обязательного подключения к облачному сервису. Локальная обработка данных позволяет использовать обученные навыки даже при отсутствии постоянной связи с удалённой инфраструктурой.

Как обучают искусственный интеллект для роботов

По данным NEURA Robotics, обучение Neuron AI объединяет несколько источников данных. Это опыт взаимодействия с реальными роботами, смоделированные варианты ситуаций и демонстрации действий человека, записанные с помощью костюмов, оснащённых датчиками.

Для сбора данных, обучения навыкам и сравнительной оценки моделей компания использует собственную инфраструктуру NEURA Gyms. Среди промышленных партнёров, связанных с работой над данными для робототехники, названы Schaeffler и Bosch.

Для дальнейшей адаптации моделей предназначена платформа Neuraverse. Она должна позволить заказчикам настраивать навыки под конкретные производственные процессы и распространять их между группами роботов.

Компании смогут сохранять обученные навыки в частном режиме или, по желанию, делиться ими с другими участниками экосистемы. Такой обмен потенциально способен ускорить развитие робототехники: полезный навык не обязательно придётся заново разрабатывать и обучать для каждого отдельного применения.

Одним из ключевых показателей разработчики считают Time-to-Skill — время, необходимое для обучения робота определённой задаче и достижения надёжного выполнения. Однако в опубликованном анонсе компания не привела конкретных измерений этого показателя.

Одиннадцать минут автономной работы: сортировка и загрузка белья

Практические возможности Neuron AI NEURA Robotics планирует продемонстрировать на человекоподобном роботе 4NE1 в рамках мероприятия NVIDIA GTC Berlin, намеченного на 20–22 октября 2026 года.

В заявленной демонстрации робот должен за 11 минут самостоятельно выполнить последовательность операций с бельём: рассортировать его, загрузить в стиральную машину, закрыть и повторно открыть дверцу, достать вещи и перенести их в сушильную машину.

Весь сценарий предполагается выполнить без вмешательства человека. При этом речь идёт именно об обработке и перемещении белья, а не о полном цикле стирки и сушки.

Такая демонстрация интересна не отдельными манипуляциями, а необходимостью связать их в единую последовательность. Роботу предстоит перемещать предметы, взаимодействовать с бытовой техникой и сохранять понимание текущего этапа задачи.

Именно подобные сценарии позволяют оценить, насколько хорошо система справляется с многоэтапными действиями в физическом мире.

Что пока остаётся неизвестным

Несмотря на амбициозные заявления, возможности Neuron AI ещё предстоит оценить по независимым результатам испытаний.

В опубликованном материале не приводятся сравнительные тесты, которые показывали бы, насколько новая архитектура превосходит системы, использующие преимущественно зрение. Не опубликованы и количественные данные о том, насколько дополнительные сенсоры повышают надёжность выполнения задач или сокращают время обучения.

Поэтому пока следует различать заявленные возможности модели и экспериментально подтверждённые результаты. Успешная демонстрация одного сценария сама по себе не доказывает, что робот сможет столь же надёжно работать в незнакомой квартире, на загруженном производстве или в постоянно меняющейся обстановке.

Тем не менее направление выглядит перспективным. Чтобы роботы могли выполнять повседневные обязанности, им недостаточно научиться распознавать объекты и повторять движения. Им необходимо учитывать физический результат своих действий, запоминать предыдущие события и корректировать поведение при изменении обстоятельств.

Neuron AI — попытка объединить эти способности в единой системе. Если заявленный подход удастся подтвердить на практике, он может упростить обучение роботов новым навыкам и расширить возможности применения человекоподобных машин за пределами лабораторий.

 

Комментарии

comments powered by Disqus
Мы в социальных сетях: