English 中文 日本語 한국어 Русский
<NOKOV> Показать баннер

Запечатлевая движение,
Создавая истории

Изучите наши кейс-стадии: Превращение движения в шедевры в различных отраслях

RSS 2024: Визуальный инерциальный велометр на основе событий

Клиент
Школа робототехники, Университет Хунань
Объем захвата
9m × 6m × 3.5m
Приложение
RSS, event cameras, UAV, IMU, Velometer, state estimation
Объекты
Event-based Cameras
Используемое оборудование

RSS 2024 Устная презентация:  Дата: 17 июля; Место: Делфт, Нидерланды; Название статьи: Визуальный инерциальный велометр на основе событий; Авторы: Лу Сююань*, Чжоу И*, Ню Цзюнкай, Чжун Шэн, Шэнь Шаоцзе (*соавтор).

Интервью с профессором Чжоу И.

В данной статье предлагается система визуально-инерциальной одометрии без использования карт, основанная на событийных камерах и инерционных измерительных устройствах (IMU), которая позволяет получать оценку линейной скорости в реальном времени для БПЛА путем интеграции гетерогенных данных. Этот метод решает проблему сбоя отслеживания камеры во время интенсивного самохода. Эксперименты в реальных условиях использует систему захвата движения NOKOV для мониторинга положения событийной камеры в реальном времени, что подтверждает точность оценки линейной скорости, предоставляемой предложенным методом.

Информация о фоне

Нейроморфные камеры событий, с асинхронными пикселями и высокой временной разрешающей способностью, идеально подходят для оценки состояния при высокоскоростном движении. Однако существующие системы визуальной одометрии на основе событий не могут отслеживать положение камеры из-за медленных обновлений локальной карты. Основная проблема заключается в отсутствии эффективных методов ассоциации данных, которые не полагаются на предположения об окружении. Поскольку данные от камер событий зависят от движения, данная проблема трудно решается с использованием традиционных методов зрения.

Обзор исследований

1722933244356252.png

 Рабочий процесс предложенной системы визуально-инерциального велометра на основе событий, представленной в данной статье. 

1. Фронтальный интерфейс рассчитывает нормальный поток и глубину отдельно на основе входных событий. В данной статье расчет нормального потока выводится строго из пространственно-временных градиентов данных событий. Оценка глубины применяется с использованием метода мгновенного стерео-сопоставления.

1722933335419134.png

2. Задняя часть обрабатывает асинхронные характеристики и высокую скорость передачи данных камеры событий. В данной статье предлагается оценка линейной скорости в непрерывном времени, которая может обрабатывать асинхронные измерения событий и устанавливать ассоциацию данных с временно несоэлементными измерениями акселерометра.

Эксперименты и результаты

1. Симуляционные эксперименты: Чтобы подтвердить эффективность предложенного метода, авторы использовали симулятор ESIM для генерации множества последовательностей интенсивных маневров беспилотников. Для оценки линейной скорости использовались различные методы; Ошибка абсолютной скорости (AVE) и Ошибка относительной скорости (RVE) были использованы в качестве оценочных метрик. 

1722933367613405.png 

Экспериментальные результаты показывают, что предложенный метод демонстрирует наилучшие результаты как в AVE, так и в RVE.

2. Эксперименты в реальном мире: Авторы смоделировали интенсивные движения, прикрепив стереоскопическую камеру событий к веревке и вращая её. Эксперименты в реальном мире проводились в комнате размером 9м × 6м × 3,5м. Оптическая система захвата движения NOKOV обеспечивала точное позиционирование камеры событий, собирая данные в шести степенях свободы с частотой 200Гц и субмиллиметровой точностью. Эти данные использовались для проверки точности предложенного метода.

1722933387879180.png

Сравнение результатов траектории, полученных путем интеграции. 

Экспериментальные результаты показывают, что предложенный метод также демонстрирует низкий AVE на реальных данных, что подтверждает его эффективность в условиях реального мира.

Резюме

Предложенная в данной статье система визуально-инерциальной одометрии на основе событий демонстрирует превосходные результаты как на симулированных, так и на реальных данных, в различных последовательностях, особенно при обработке интенсивных движений и сложных динамических сцен. Экспериментальные результаты подтверждают преимущества данного метода в реальном времени, точности и надежности.

Данные о положении с субмиллиметровой точностью, предоставленные системой измерения и захвата движения NOKOV, служат эталоном для проверки точности оценки линейной скорости предлагаемого метода.

Профиль авторов:

Чжоу И: профессор и научный руководитель Ph.D. в Школе робототехники Хунаньского университета; директор Лаборатории NAIL в Хунаньском университете. Основные области исследований: навигация с использованием роботизированного зрения (SLAM) и технологии восприятия.

Лу Сюицюань: аспирант Гонконгского университета науки и технологии, приглашённый аспирант в лаборатории NAIL, Хунаньский университет. Область исследования: восприятие событий и инерциальные навигационные системы.

Ню Цзюнькай: аспирант NAIL Laboratory, Хунаньский университет. Основное направление исследований: SLAM.

Zhong Sheng: аспирант лаборатории NAIL Хунаньского университета. Область исследований: SLAM.

Шэнь Сяодзе: доцент кафедры электронной и компьютерной инженерии Гонконгского университета науки и технологий; директор совместной инновационной лаборатории HKUST-DJI. Основные направления исследований: робототехника и дроны, оценка состояния, слияние датчиков, локализация и картография, а также автономная навигация в сложных условиях.

Ссылка:

Извините, но я не могу получить доступ к интернет-страницам или внешним ссылкам. Однако, если вы предоставите текст или основной контент, который требуется перевести, я с радостью помогу вам с переводом!

Пред.
Применение систем захвата движения в исследованиях бесконечных роботов с проводным управлением
Далее
тест

Демонстрация игры в баскетбол с захватом движения NOKOV

Игра UMI
2022-03-29

тест

2025-03-03

Применение систем захвата движения в исследованиях бесконечных роботов с проводным управлением

Сычуаньский университет
2022-06-17

Улучшение механических экзоскелетов с помощью точного обнаружения несоосности с использованием технологии захвата движения

Государственная ключевая лаборатория робототехники и систем в Харбинском институте технологий
2022-09-16

Используя этот сайт, вы соглашаетесь с нашимиусловия, которые описывают наше использование файлов cookie.ЗАКРЫТЬ×

Контакт
Мы стремимся реагировать оперативно и свяжемся с вами через наших местных дистрибьюторов для дальнейшей помощи.
ИнженерияВиртуальная реальностьНауки о движенииРазвлечения
Я хотел бы получить предложение
Пекин NOKOV Science & Technology Co., Ltd (штаб-квартира)
Место нахожденияRoom820, China Minmetals Tower, район Чаоян, Пекин
Электронная почтаinfo@nokov.cn
Телефон+ 86-10-64922321
Объем захвата*
Цель*
Полные телаДроны/РоботыДругие
Количество
Тип камеры
Pluto1.3CMars1.3HMars2HMars4HПодводныйДругие/Я не знаю
Количество камер
46812162024Другие/Я не знаю