Роботы с долгосрочной памятью: новый прорыв исследователей из MIT

Группа специалистов из Массачусетского технологического института (MIT) создала инновационную систему искусственного интеллекта, которая наделяет роботов способностью к долгосрочному запоминанию. Новая технология позволяет машинам не просто фиксировать визуальные образы, но и четко определять, где и в какой момент времени был замечен тот или иной объект.

Система получила название DAAAM (сокращение от Describe Anything, Anywhere, at Any Moment — «Опиши что угодно, где угодно и в любой момент»). Разработкой руководили Лука Карлоне и Николас Горло в сотрудничестве с Лукасом Шмидом из Технологического университета Нюрнберга. Проект решает давнюю проблему робототехники: необходимость выбора между детальным описанием среды и скоростью работы в реальном времени.

Механика работы: 4D-память в реальном времени

DAAAM анализирует видеопоток с камер, оснащенных датчиками глубины, для формирования так называемого «4D-графа сцены». Это динамическая база данных, в которой каждому обнаруженному объекту присваиваются три ключевых параметра:

• Текстовое описание предмета.
• Его точные координаты в трехмерном пространстве.
• Временная метка обнаружения.

Система обрабатывает данные со скоростью 10 кадров в секунду. Ключевым нововведением стала техника пакетной обработки: вместо анализа каждого кадра по отдельности, ИИ группирует сложные или неясные изображения и обрабатывает их совместно. По заявлению разработчиков, это позволило увеличить скорость работы примерно в десять раз, обеспечив функционирование в режиме реального времени, что ранее считалось практически недостижимым.

Преимущества перед существующими аналогами

До появления DAAAM роботы сталкивались с дилеммой: либо создавать подробную карту окружения, теряя в производительности, либо реагировать быстро, но иметь «короткую» память. Новая система успешно объединяет оба подхода.

Испытания продемонстрировали явное превосходство над конкурентами:

• В навигационных задачах роботы с DAAAM находили объекты на 28% чаще, чем лучшие альтернативные системы.
• Точность ответов на вопросы об окружающей обстановке выросла на 53,6%.
• Ошибки в определении местоположения и времени сократились более чем на 20%.

Текущие ограничения и перспективы

Несмотря на успех, исследователи выделяют ряд аспектов, требующих доработки. Модель ИИ иногда ошибается при встрече с редкими или необычными предметами, подменяя реальность предположениями.

На данный момент DAAAM обрабатывает около пяти объектов в секунду. Этого достаточно для наземных роботов, но может не хватить для скоростных дронов или систем виртуальной реальности, требующих мгновенного отклика. Также ученые отметили проблемы с масштабированием памяти при очень длительной работе и снижение точности в полностью цифровых симуляциях по сравнению с реальными условиями.