บทนำ
ในระบบการรับรู้ของตัวแทนอัจฉริยะเคลื่อนที่ การเก็บภาพแบบธรรมดาไม่สามารถตอบสนองความต้องการของการตัดสินใจอัตโนมัติได้อีกต่อไป กล้องคู่และ IMU แบบหกแกนจะซิงโครไนซ์การเก็บข้อมูล โดยจับพิกเซลภาพ ความลึก 3 มิติ ท่าทางเชิงเฉื่อย และข้อมูลการเคลื่อนไหวบนแกนเวลาเดียวกัน เพื่อสร้างชุดข้อมูลการรับรู้แบบหลายแหล่งที่แตกต่างกัน โซลูชันการเก็บรวบรวมแบบบูรณาการนี้ไม่ใช่แค่การ "ถ่ายภาพ + วัดท่าทาง" อีกต่อไป แต่เป็นการสร้างฐานดิจิทัลเชิงพื้นที่ที่สามารถวัดปริมาณและแก้ปัญหาได้สำหรับอุปกรณ์ โมดูลชุดภาพวิเคราะห์อัจฉริยะ Yinglongxin บรรลุการเก็บข้อมูลแบบฮาร์ดซิงโครไนซ์ของภาพสองตา ข้อมูลความลึก และข้อมูลเฉื่อยแบบหกแกน มอบข้อมูลการรับรู้ดิบคุณภาพสูงสำหรับการพัฒนาอัลกอริทึม การนำผลิตภัณฑ์ไปใช้ และการตรวจสอบสถานการณ์
1、 การเก็บข้อมูลแบบซิงโครนัสของกล้องสองตาและ IMU หกแกนคืออะไร?
กล้องสองตาทำหน้าที่เก็บภาพซ้ายและขวา ส่งออกความลึกของฉากผ่านการคำนวณพารัลแลกซ์ และบันทึกข้อมูลทางเรขาคณิตเชิงพื้นที่ของสภาพแวดล้อมภายนอก; IMU หกแกนรวมมาตรวัดความเร่งสามแกนและไจโรสโคปสามแกนเข้าด้วยกัน เก็บข้อมูลความเร่งและความเร็วเชิงมุมของตัวพาที่ความถี่สูง และจับสถานะการเอียง การหมุน การสั่นสะเทือน และการเคลื่อนไหวของอุปกรณ์ได้แบบเรียลไทม์
คีย์หลัก: การซิงโครไนซ์การประทับเวลาไม่ใช่แค่การรวมแหล่งข้อมูลอิสระสองแหล่งเข้าด้วยกัน แต่เป็นการกระตุ้นการซิงโครไนซ์ในระดับฮาร์ดแวร์เพื่อให้มั่นใจถึงการจัดตำแหน่งที่แม่นยำระหว่างภาพตาทั้งสองข้างในแต่ละเฟรมกับข้อมูลเฉื่อย IMU ที่สอดคล้องกันในขณะนั้น ขจัดข้อผิดพลาดจากการหลอมรวมที่เกิดจากการจัดตำแหน่งเวลาที่คลาดเคลื่อน ได้ชุดข้อมูล VIO ดิบที่มีคุณภาพสูง และรองรับการคำนวณท่าทาง การสร้างแผนที่ SLAM และการสร้างแบบจำลอง 3 มิติในลำดับถัดไป
2、 คุณค่าหลักหลายประการของการเก็บรวบรวมข้อมูลหลายแหล่ง
- ชดเชยข้อบกพร่องของเซ็นเซอร์เดี่ยวและเพิ่มความทนทานต่อการรับรู้
การมองเห็นแบบสองตาล้วน: เมื่อเผชิญกับแสงน้อย พื้นผิวสูญเสียรายละเอียด หรือฉากถูกบดบัง การคำนวณความลึกจะล้มเหลว; เมื่อเคลื่อนที่ด้วยความเร็วสูง ชัตเตอร์แบบกลิ้งทำให้เกิดภาพซ้อนและความไม่ตรงกันของดิสพาริตีล้มเหลว IMU เดี่ยว: การอินทิเกรตในระยะยาวจะทำให้ตำแหน่งคลาดเคลื่อน ไม่สามารถรับข้อมูลเชิงพื้นที่ของสภาพแวดล้อมได้ และรับรู้ได้เพียงการเคลื่อนไหวของตัวเองเท่านั้น การเก็บข้อมูลร่วมกันของกล้องสองตาและ IMU: การมองเห็นให้ข้อจำกัดเชิงพื้นที่ของสภาพแวดล้อมและแก้ไขการคลาดเคลื่อนของ IMU; IMU ความถี่สูงเติมเต็มช่องว่างระหว่างเฟรมกล้อง และสามารถส่งออกสถานะการเคลื่อนไหวได้อย่างต่อเนื่องในสภาพแวดล้อมที่ถูกบดบังและมีพื้นผิวรายละเอียดอ่อน ซึ่งปรับปรุงเสถียรภาพของระบบการรับรู้ทั้งหมดได้อย่างมาก
- ชุดข้อมูลคุณภาพสูงช่วยเสริมศักยภาพในการฝึกอบรมและการปรับปรุงอัลกอริทึม
การเก็บรวบรวมข้อมูลดิบของภาพ ข้อมูลความลึก ข้อมูลความเฉื่อย และข้อมูลท่าทางแบบซิงโครไนซ์สามารถนำไปใช้โดยตรงสำหรับการฝึกอบรม การทดสอบ และการตรวจสอบอัลกอริทึม VIO, SLAM, การตรวจจับวัตถุ และการหลบหลีกสิ่งกีดขวาง ทีมวิจัยและพัฒนาสามารถเก็บรวบรวมข้อมูลตามสถานการณ์จริง ปรับแต่งพารามิเตอร์ ตรวจสอบขอบเขตของอัลกอริทึม ลดช่องว่างระหว่างสภาพแวดล้อมจำลองกับสภาพแวดล้อมจริง และย่นระยะเวลาการพัฒนาอัลกอริทึมการรับรู้อัจฉริยะ
- เอาต์พุตท่าทางที่แม่นยำ บรรลุการระบุตำแหน่งเชิงพื้นที่แบบเรียลไทม์และการทำแผนที่
จากการเก็บข้อมูลแบบซิงโครไนซ์ ทำให้สามารถส่งออกพิกัด มุมท่าทาง และความเร็วการเคลื่อนที่ของอุปกรณ์ในอวกาศแบบเรียลไทม์ผ่านการคำนวณการหลอมรวมภาพและความเฉื่อย ทำให้อุปกรณ์เคลื่อนที่รู้ว่า 'ฉันอยู่ที่ไหน ฉันหันหน้าไปทางไหน และจะเคลื่อนที่อย่างไร' ซึ่งเป็นแหล่งข้อมูลพื้นฐานสำหรับการนำทางอัตโนมัติ
- การบันทึกเหตุการณ์แบบไดนามิกอย่างสมบูรณ์สำหรับการวิเคราะห์ย้อนหลังและการวินิจฉัยข้อบกพร่อง
ชุดข้อมูลทั้งหมดถูกจัดเก็บแบบซิงโครไนซ์ ซึ่งสามารถจำลองกระบวนการทำงานทั้งหมดของอุปกรณ์ได้อย่างสมบูรณ์: ภาพสภาพแวดล้อม ระยะห่างสิ่งกีดขวาง การสั่นสะเทือนของอุปกรณ์ และการเปลี่ยนแปลงท่าทาง เมื่อเกิดความผิดปกติในการนำทางหรือการหลบหลีกสิ่งกีดขวางล้มเหลว สามารถเล่นซ้ำปัญหาการเก็บข้อมูลและการระบุตำแหน่งเพื่อแก้ไขข้อบกพร่องของผลิตภัณฑ์ ตรวจสอบข้อขัดข้องหน้างาน และประเมินสถานการณ์จำลอง
- โมดูลเก็บข้อมูลแบบรวมช่วยลดต้นทุนการรวมระบบทางวิศวกรรม
โมดูลการมองเห็นภาพอัจฉริยะ Yinglongxin ได้เสร็จสิ้นการสอบเทียบกล้อง การสอบเทียบพารามิเตอร์ภายนอกของกล้องและ IMU ก่อนออกจากโรงงาน และสามารถเก็บและซิงโครไนซ์ข้อมูลหลายแหล่งได้ทันทีเมื่อเปิดกล่อง ลูกค้าไม่จำเป็นต้องสร้างฮาร์ดแวร์เก็บข้อมูลแบบซิงโครไนซ์ที่ซับซ้อน ลดการลงทุนในอุปกรณ์สอบเทียบ และลดภาระการพัฒนาของการรวมฮาร์ดแวร์และการจัดตำแหน่งข้อมูล
3、 สาขาการใช้งานหลัก
- หุ่นยนต์มนุษย์และหุ่นยนต์เคลื่อนที่ AMR
ซิงโครไนซ์การเก็บข้อมูลสภาพแวดล้อมสามมิติกับท่าทางของร่างกายหุ่นยนต์และข้อมูลการสั่น ใช้สำหรับการนำทางอัตโนมัติ การตรวจจับขั้นบันได การหลบหลีกสิ่งกีดขวาง และการควบคุมสมดุล; พร้อมกันนั้นยังเก็บชุดข้อมูลฉากภายในอาคารจำนวนมากเพื่อสนับสนุนการปรับปรุงอัลกอริทึมการรับรู้ของหุ่นยนต์แบบวนซ้ำ และปรับตัวเข้ากับสภาพแวดล้อมแบบไดนามิกที่ซับซ้อนในบ้าน โรงงาน และอาคารพาณิชย์
- การทำงานของอากาศยานไร้คนขับที่ระดับความสูงต่ำ
การเก็บรวบรวมข้อมูลภาพ ข้อมูลความลึก ท่าทางของอากาศยาน และข้อมูลการสั่นสะเทือนแบบซิงโครไนซ์บนอากาศยาน รองรับการหลบหลีกสิ่งกีดขวางอัตโนมัติของโดรน การทำแผนที่ภูมิประเทศ การตรวจสอบเสาส่งสัญญาณ และบันทึกข้อมูลการรับรู้ตลอดเที่ยวบินเพื่อการปรับเส้นทางให้เหมาะสม การวิเคราะห์ความเสี่ยง และรับประกันความปลอดภัยในการบินที่ระดับความสูงต่ำ
- AGV อุตสาหกรรมและการผลิตอัจฉริยะ
การประชุมเชิงปฏิบัติการเรื่องการจัดการอัตโนมัติด้วย AGV และการหลบหลีกสิ่งกีดขวางแบบไดนามิก; การกำหนดตำแหน่งชิ้นงานสามมิติของแขนกลหุ่นยนต์ รวบรวมข้อมูลฉากแบบไดนามิกจากสายการผลิต ระบุตำแหน่งวัสดุ และบันทึกข้อมูลการเคลื่อนที่และการสั่นสะเทือนของตัวพา เพื่อปรับให้เข้ากับสถานที่อุตสาหกรรมที่มีความเร็วสูงและมีสิ่งกีดขวางหลายอย่าง
- การสำรวจสามมิติ การแปลงเป็นดิจิทัลแบบเรียลไทม์ และการกำหนดตำแหน่งเชิงพื้นที่ด้วย AR
การสร้างแบบจำลองสามมิติของพื้นที่ภายในและภายนอกอาคาร การรวบรวมสินทรัพย์ในโลกจริงแบบดิจิทัล การเก็บข้อมูลโครงสร้างฉากด้วยกล้องสองตา การบันทึกเส้นทางการเคลื่อนที่ของอุปกรณ์ด้วย IMU การสร้างแบบจำลองพอยต์คลาวด์ความแม่นยำสูงอย่างรวดเร็ว; อุปกรณ์ AR อาศัยชุดข้อมูลที่รวบรวมนี้เพื่อบรรลุการกำหนดตำแหน่งเชิงพื้นที่และการผสานรวมระหว่างโลกเสมือนกับโลกจริง
- แพลตฟอร์มการวิจัยและการพัฒนาอัลกอริทึม
มหาวิทยาลัย ห้องปฏิบัติการ AI และบริษัทอัลกอริทึมทำหน้าที่เป็นอุปกรณ์เก็บข้อมูล VIO/SLAM รวบรวมชุดข้อมูลมาตรฐานเป็นชุดภายใต้สภาพแสง ความเร็วในการเคลื่อนที่ และฉากที่ซับซ้อนที่แตกต่างกัน สำหรับการเปรียบเทียบอัลกอริทึม การประเมินประสิทธิภาพ และการฝึกโมเดล
- อุปกรณ์ตรวจสอบเคลื่อนที่แบบพกพา
เทอร์มินัลตรวจสอบเคลื่อนที่สำหรับการตรวจสอบราง การตรวจสอบท่อ และการรักษาความปลอดภัย ซิงโครไนซ์การบันทึกภาพหน้างาน ระยะเป้าหมาย และท่าทางของอุปกรณ์ตรวจสอบ เพื่อให้สามารถตรวจสอบย้อนกลับข้อมูลการตรวจสอบได้ ช่วยในการระบุข้อบกพร่อง และบันทึกพื้นที่หน้างาน
4、 Yinglongxin Intelligence | ข้อได้เปรียบของโซลูชันภาพวิทัศน์
✅ การซิงโครไนซ์เวลาระดับฮาร์ดแวร์ จัดตำแหน่งภาพสองตา (binocular) กับเวลาของข้อมูล IMU เพื่อให้มั่นใจในการเก็บข้อมูลที่เชื่อถือได้
✅ เลือกใช้ global shutter ได้ ไม่มีภาพเงา (ghosting) ในการเก็บภาพฉากที่เคลื่อนที่ด้วยความเร็วสูง เหมาะสำหรับการเก็บข้อมูลพาหะแบบไดนามิก
✅ การสอบเทียบจากโรงงาน การสอบเทียบพารามิเตอร์ภายในและภายนอกเสร็จสมบูรณ์ แกะกล่องแล้วเก็บข้อมูลหลายแหล่งโดยตรง
✅ รองรับ SDK รองรับการส่งออกแบบเรียลไทม์ การจัดเก็บและการบันทึกภาพดิบ ข้อมูลความลึก และสตรีมข้อมูล IMU
✅ ฟิลด์การมองเห็น อินเทอร์เฟซ และอัตราเฟรมที่ปรับแต่งได้ เหมาะสำหรับพาหะ แพลตฟอร์มคอมพิวติ้ง และข้อกำหนดการเก็บข้อมูลที่แตกต่างกัน
✅ ให้การสนับสนุนทางเทคนิคเพื่อช่วยลูกค้าในการเก็บข้อมูล ส่งออกชุดข้อมูล และรวมอัลกอริทึม
บทสรุป
การเก็บข้อมูลแบบซิงโครนัสของกล้องคู่พร้อมหกแกน IMU ไม่เพียงแต่มีคุณค่าสำหรับการรับรู้ของฮาร์ดแวร์เท่านั้น แต่ยังมีคุณค่าสำหรับการสร้างข้อมูลดิจิทัลที่สมบูรณ์ของสภาพแวดล้อมและการเคลื่อนไหวของร่างกาย ข้อมูลที่หลอมรวมจากหลายแหล่งไม่เพียงแต่เป็นอินพุตสำหรับการตัดสินใจอัตโนมัติแบบเรียลไทม์ของอุปกรณ์เท่านั้น แต่ยังเป็นสินทรัพย์หลักสำหรับการทำซ้ำอัลกอริทึม การตรวจสอบสถานการณ์ และการติดตามข้อผิดพลาด ด้วยการเปิดตัวอย่างรวดเร็วของตัวแทนอัจฉริยะเคลื่อนที่ต่างๆ การเก็บข้อมูลการรับรู้จากหลายแหล่งที่มีคุณภาพสูงจะกลายเป็นความสามารถพื้นฐานในสาขาหุ่นยนต์ โดรน และระบบอัตโนมัติทางอุตสาหกรรม Yinglongxin Intelligent Image Vision นำเสนอโมดูลเก็บข้อมูลแบบรวม binocular+six axis IMU เพื่อช่วยลูกค้าในการเก็บข้อมูลฉากและนำระบบการรับรู้อัจฉริยะไปใช้ได้อย่างมีประสิทธิภาพ