Введение
В системе восприятия мобильных интеллектуальных агентов простой сбор изображений уже не может удовлетворить потребности автономного принятия решений. Двойная камера и шестиосевой IMU синхронизируют сбор данных, фиксируя визуальные пиксели, трёхмерную глубину, инерциальную ориентацию и информацию о движении на одной временной оси, формируя разнородный набор данных восприятия из множества источников. Это интегрированное решение для сбора данных — уже не просто «фотографирование + измерение ориентации», а построение количественно измеримой и решаемой пространственной цифровой основы для устройства. Серия модулей интеллектуального машинного зрения Yinglongxin обеспечивает аппаратную синхронную регистрацию бинокулярных изображений, данных о глубине и шестиосевых инерциальных данных, предоставляя высококачественные исходные данные восприятия для разработки алгоритмов, внедрения продуктов и проверки сценариев.
1. Что такое синхронный сбор данных бинокулярной камеры и шестиосевого IMU?
Бинокулярная камера отвечает за сбор левого и правого изображений, выдаёт глубину сцены посредством вычисления параллакса и фиксирует пространственную геометрическую информацию о внешней среде; шестиосевой IMU объединяет трёхосевой акселерометр и трёхосевой гироскоп, обеспечивает высокочастотный сбор ускорения и угловой скорости носителя, а также в реальном времени фиксирует наклон, вращение, вибрацию и состояние движения самого устройства.
Ключевой момент: Синхронизированный сбор временных меток — это не просто объединение двух независимых источников данных, а запуск синхронизации на аппаратном уровне для обеспечения точного согласования каждого кадра бинокулярных изображений с соответствующими инерциальными данными IMU на тот момент, устранения ошибок слияния, вызванных временным рассогласованием, получения высококачественных наборов сырых данных VIO и поддержки последующего расчёта позы, построения карт SLAM и 3D-реконструкции.
2、 Несколько ключевых ценностей сбора мультиисточниковых данных
- Компенсация недостатков одного датчика и повышение устойчивости восприятия
Чистое бинокулярное зрение: при столкновении со слабым освещением, потерей текстуры или перекрытыми сценами вычисление глубины не удаётся; при высокоскоростном движении роллинг-шаттер создаёт двоение, и сопоставление диспаратности не удаётся. Один IMU: долгосрочное интегрирование приводит к дрейфу положения, невозможно получить пространственную информацию об окружающей среде, можно воспринимать только собственное движение. Совместное получение данных бинокулярной камерой и IMU: зрение обеспечивает пространственные ограничения окружающей среды и корректирует дрейф IMU; высокочастотные данные IMU заполняют промежутки между кадрами камеры и позволяют непрерывно выдавать состояние движения в условиях перекрытия и слабой текстуры, значительно повышая стабильность всей системы восприятия.
- Высококачественные наборы данных расширяют возможности обучения и итерации алгоритмов
Синхронизированный сбор необработанных данных изображения, глубины, инерции и ориентации может напрямую использоваться для обучения, тестирования и валидации алгоритмов VIO, SLAM, обнаружения объектов и обхода препятствий. Команда разработчиков может собирать данные на основе реальных сценариев, оптимизировать параметры, проверять границы алгоритмов, сокращать разрыв между симуляцией и реальной средой, а также сокращать цикл разработки алгоритмов интеллектуального восприятия.
- Точный вывод позы, обеспечивающий позиционирование в пространстве и построение карты в реальном времени
На основе синхронного сбора данных, посредством расчёта визуально-инерциального слияния достигается вывод в реальном времени координат устройства, углов ориентации и скорости движения в пространстве. Возможность мобильных устройств знать «где я, куда я направлен и как двигаться» является фундаментальным источником данных для автономной навигации.
- Полная запись динамических событий для ретроспективного анализа и диагностики неисправностей
Весь набор данных сохраняется синхронно, что позволяет полностью воспроизвести весь процесс работы оборудования: изображения окружающей среды, расстояние до препятствий, вибрацию оборудования и изменения положения. В случае возникновения аномалий навигации или сбоев обхода препятствий можно воспроизвести проблемы сбора данных и позиционирования для отладки продукта, анализа неисправностей на месте и оценки сценариев.
- Интегрированный модуль сбора снижает затраты на инженерную интеграцию
Интеллектуальный модуль машинного зрения Yinglongxin проходит калибровку камеры, а также калибровку внешних параметров камеры и IMU на заводе, что позволяет сразу после распаковки собирать и синхронизировать данные из нескольких источников. Клиентам не нужно создавать сложное аппаратное обеспечение для синхронного сбора данных, что снижает затраты на калибровочное оборудование и уменьшает объём работ по разработке, связанных с аппаратной интеграцией и выравниванием данных.
3、 Основные области применения
- Человекоподобные роботы и мобильные роботы AMR
Синхронизация сбора трёхмерной информации об окружающей среде с данными о позе и колебаниях корпуса робота. Используется для автономной навигации, обнаружения ступеней, обхода препятствий и управления балансом; одновременный сбор больших объёмов наборов данных о внутренних сценах для поддержки итеративной оптимизации алгоритмов восприятия робота и адаптации к сложным динамическим средам в домах, на заводах и в коммерческих зданиях.
- Работа беспилотных летательных аппаратов на малых высотах
Бортовая синхронная регистрация изображений, данных глубины, ориентации летательного аппарата и вибрации. Поддержка автономного обхода препятствий беспилотными летательными аппаратами, картографирования местности, инспекции вышек и записи данных восприятия на протяжении всего полёта для оптимизации маршрута, анализа рисков и обеспечения безопасности полётов на малых высотах.
- Промышленные AGV и интеллектуальное производство
Цеховые AGV: автономное перемещение грузов и динамическое обход препятствий; трёхмерное позиционирование заготовок манипулятором робота. Сбор данных о динамических сценах с производственной линии, определение местоположения материалов и регистрация информации о движении и вибрации носителей для адаптации к высокоскоростным промышленным площадкам с множеством препятствий.
- 3D-съёмка, оцифровка в реальном времени и AR-пространственное позиционирование
3D-реконструкция внутренних и наружных пространств, цифровой сбор реальных активов. Бинокулярный захват структуры сцены, запись траектории движения устройства с помощью IMU, быстрое создание высокоточной модели облака точек; AR-устройства полагаются на этот набор собранных данных для достижения пространственного позиционирования и интеграции виртуального и реального.
- Платформа для исследований и разработки алгоритмов
Университеты, лаборатории ИИ и алгоритмические компании служат устройствами сбора данных VIO/SLAM. Пакетный сбор стандартных наборов данных в различных условиях освещения, при разных скоростях движения и в сложных сценах для сравнения алгоритмов, оценки производительности и обучения моделей.
- Портативное мобильное инспекционное оборудование
Мобильные терминалы для путевой инспекции, инспекции трубопроводов и охранной мобильной инспекции. Синхронизация записи изображений на месте, расстояния до цели и положения инспекционного оборудования для обеспечения прослеживаемости данных инспекции, помощи в выявлении дефектов и записи пространства на месте.
4、 Yinglongxin Intelligence | Преимущества решения для машинного зрения
✅ Аппаратная синхронизация времени, выравнивание стереоизображений с временными метками данных IMU для обеспечения надёжного сбора данных
✅ Опциональный глобальный затвор, отсутствие смазывания при съёмке в сценах с высокоскоростным движением, подходит для сбора данных с динамических носителей
✅ Заводская предварительная калибровка, внутренняя и внешняя калибровка параметров выполнена, распаковка сразу собирает мультиисточниковые данные
✅ Поддержка SDK, поддержка вывода в реальном времени, хранения и записи исходных изображений, глубины, потоков данных IMU
✅ Настраиваемое поле зрения, интерфейс, частота кадров, подходит для различных носителей, вычислительных платформ и требований к сбору данных
✅ Обеспечение технической поддержки для помощи клиентам в завершении сбора данных, экспорта наборов данных и интеграции алгоритмов
Заключение
Синхронный сбор данных с двух камер и шестиосевого IMU ценен не только для аппаратного восприятия, но и для построения полной цифровой информации об окружающей среде и движении тела. Данные мультисенсорного объединения являются не только входными данными для принятия решений автономными устройствами в реальном времени, но и ключевым активом для итерации алгоритмов, проверки сценариев и отслеживания неисправностей. С быстрым внедрением различных мобильных интеллектуальных агентов высококачественный сбор данных мультисенсорного восприятия станет фундаментальной возможностью в области робототехники, беспилотных летательных аппаратов и промышленной автоматизации. Yinglongxin Intelligent Image Vision предоставляет интегрированный модуль сбора данных «бинокулярная система + шестиосевой IMU», помогая клиентам эффективно завершать сбор данных о сцене и внедрение систем интеллектуального восприятия.