ความร้อน & โมดูลกล้อง AI แสงที่มองเห็นได้ - คำถามที่พบบ่อยและคู่มือ
สารบัญ
โปรดให้ข้อมูลเพิ่มเติมเกี่ยวกับโมดูลที่น่าทึ่งนี้.
นี่คือโมดูลการถ่ายภาพคู่สเปกตรัม ออกแบบมาโดยเฉพาะสำหรับโดรน, การรวมแสงที่มองเห็นได้และการถ่ายภาพความร้อนจากอินฟราเรดเข้ากับฟิวชั่นคู่สเปคตรัมในหน่วยขนาดกะทัดรัดเดียว. คุณสมบัติที่สำคัญได้แก่:
- การแสดงทุกสภาพอากาศ: สามารถตรวจจับและติดตามเป้าหมายในเวลากลางวัน, แสงน้อย, ควัน, หรือหมอก.
- การติดตามเป้าหมายที่ขับเคลื่อนด้วย AI: อัลกอริทึม AI ในตัวจะรับรู้และติดตามคนเดินเท้าและยานพาหนะโดยอัตโนมัติ 200 เมตร.
- กะทัดรัด & มีน้ำหนักเบา: โมดูลมีขนาดกะทัดรัดเป็นพิเศษ (20 × 20 × 36 มิลลิเมตร) และแสงพิเศษ (<37 ก.), ทำให้ง่ายต่อการติดตั้งบนโดรน, คนขี้เกียจ, และระบบ FPV.
- แฝงต่ำ & มีประสิทธิภาพ: การใช้พลังงานต่ำเป็นพิเศษ (<0.8 W) ด้วยเวลาแฝงการถ่ายภาพแบบเรียลไทม์ <60 นางสาว.
มันรวมเข้ากับ betaflight ได้อย่างไร?
โมดูลนี้เข้ากันได้อย่างสมบูรณ์กับตัวควบคุมเที่ยวบินโอเพนซอร์ซเช่นBetaflight. คุณสมบัติการรวม:
- เอาท์พุทวิดีโอ: อินเทอร์เฟซเอาต์พุตวิดีโอมาตรฐานสำหรับการรวม FPV หรือ telemetry.
- อินเทอร์เฟซข้อมูล: รองรับ UART/I2C สำหรับการส่งข้อมูลการจดจำ AI หรือพิกัดเป้าหมายไปยังคอนโทรลเลอร์เที่ยวบิน, การอนุญาตให้ระบบการบินใช้ข้อมูลนี้สำหรับการนำทางอิสระหรือช่วยนำทาง.
- การปรับใช้อย่างรวดเร็ว: สามารถติดตั้งและรวมภายใน 5 นาทีเนื่องจากการออกแบบแบบแยกส่วน.
สามารถควบคุมได้เท่านั้น, หรือสามารถควบคุมเสียงพึมพำได้?
โมดูล AI เองสามารถควบคุมเที่ยวบินของโดรนได้โดยตรง. ให้ข้อมูลการถ่ายภาพอัจฉริยะและข้อมูลการติดตามเป้าหมาย. ตัวควบคุมเที่ยวบินสามารถตัดสินใจได้ตามข้อมูลนี้สำหรับการนำทางหรือการดำเนินการเผยแผ่.
โมดูล AI ติดตั้งไฟล์ อินเทอร์เฟซ UART ที่ส่งข้อมูลตำแหน่งตามเวลาจริงของเป้าหมายที่ตรวจพบอย่างต่อเนื่อง, เช่นมนุษย์และยานพาหนะ, โดยตรงไปยังคอนโทรลเลอร์เที่ยวบิน. โดยได้รับพิกัดที่แม่นยำเหล่านี้, คอนโทรลเลอร์เที่ยวบินสามารถ ปรับทัศนคติของเสียงพึมพำแบบไดนามิก, ปฐมนิเทศ, และเส้นทางการบิน, การเปิดใช้งานการติดตามเป้าหมายแบบอิสระและการนำทางอัจฉริยะ. การแลกเปลี่ยนข้อมูลที่ไร้รอยต่อนี้ช่วยให้เสียงพึมพำ ตอบสนองต่อการเคลื่อนย้ายเป้าหมายแบบเรียลไทม์, รักษาเที่ยวบินที่มั่นคงในขณะที่ติดตามหรือสังเกตเป้าหมาย, และดำเนินการภารกิจที่ซับซ้อนด้วยการแทรกแซงผู้ประกอบการขั้นต่ำ. การบูรณาการการรับรู้ AI และการควบคุมเที่ยวบินช่วยเพิ่มประสิทธิภาพการปฏิบัติงานและความปลอดภัยของภารกิจ, ทำให้เหมาะสำหรับการเฝ้าระวัง, การตรวจสอบ, และแอปพลิเคชันการค้นหาและช่วยเหลือ.
AI รับรู้ภาพที่มองเห็นได้หรือลายเซ็นความร้อน?
โมดูลรองรับการระบุแสงที่มองเห็นได้และภาพความร้อนของผู้คนและรถยนต์.
- การจดจำแสงที่มองเห็นได้: สำหรับสภาพแวดล้อมในเวลากลางวันหรือสว่างไสว.
- การรับรู้การถ่ายภาพความร้อน: สำหรับเงื่อนไขกลางคืนหรือการมองเห็นต่ำ.
- ฟิวชั่นคู่สเปกตรัม: รวมการถ่ายภาพที่มองเห็นได้และความร้อนแบบเรียลไทม์เพื่อเพิ่มการรับรู้สถานการณ์และความแม่นยำ.
ฉันขอดูภาพรวมจากกล้องความร้อนและกล้องทั่วไปได้ไหม?
ใช่, โมดูลรองรับการจดจำเป้าหมายและการติดตาม. เมื่อเป็นเป้าหมาย (บุคคลหรือยานพาหนะ) ตรวจพบ, UAV สามารถเปลี่ยนเป็นโหมดนำทางภาพได้ผ่านตัวควบคุมระยะไกล. หลังจากเปิดใช้งาน, โมดูลส่งข้อมูลตำแหน่งเป้าหมายแบบเรียลไทม์ไปยังคอนโทรลเลอร์เที่ยวบินผ่าน UART, อนุญาตให้ UAV ปรับทัศนคติและทำตามเป้าหมายโดยอัตโนมัติ.
โมดูลเชื่อมต่อกับ UAV ได้อย่างไร?
โมดูลมีอินเทอร์เฟซ UART สองแบบ:
- UART หนึ่งตัวเชื่อมต่อกับตัวรับสัญญาณระยะไกลของ UAV.
- UART อื่น ๆ เชื่อมต่อกับคอนโทรลเลอร์เที่ยวบิน.
เอาต์พุตวิดีโอมีให้ผ่านอินเตอร์เฟส CVBS, ซึ่งสามารถส่งผ่านระบบส่งวิดีโอของคุณ.
โมดูลกำหนดค่าและตั้งค่าอย่างไร?
มีสองวิธีในการกำหนดค่าโมดูล:
- โดยใช้ Betaflight ซอฟต์แวร์สำหรับการปรับแต่งคอนโทรลเลอร์เที่ยวบิน UAV.
- การใช้ผู้ผลิต ซอฟต์แวร์บนพีซี สำหรับการกำหนดค่าโมดูล.
คำแนะนำการดำเนินการโดยละเอียดและคู่มือผู้ใช้จะมีให้สำหรับเครื่องมือซอฟต์แวร์ทั้งสอง.
เป็นเป้าหมายโดยอัตโนมัติหรือด้วยตนเอง?
โมดูลดำเนินการตรวจจับเป้าหมายอัตโนมัติ. หลังจากเปิดใช้งานการจดจำและเลือกเป้าหมายผ่านรีโมตคอนโทรลเลอร์, UAV สามารถเข้าสู่โหมดนำทางภาพและทำตามเป้าหมายโดยอัตโนมัติ.
โมดูลจัดการกับการควบคุม UAV ได้อย่างไร, โดยเฉพาะการเคลื่อนไหวในแนวดิ่ง?
การควบคุมหันหน้าไปทางแนวนอนนั้นตรงไปตรงมา. การเคลื่อนไหวในแนวตั้งต้องใช้สนามประสานและการควบคุมคันเร่งเพื่อรักษาความแม่นยำในการติดตามและหลีกเลี่ยงการสูญเสียเป้าหมาย. โมดูลให้ข้อมูลตำแหน่งเป้าหมายเพื่อช่วยคอนโทรลเลอร์เที่ยวบินในการบำรุงรักษาการติดตามที่มีเสถียรภาพ.
คำถามที่พบบ่อยมากขึ้น
Q: หากระบบตรวจจับวัตถุหลายชิ้น, มันตัดสินใจได้อย่างไรว่าจะทำตามใด? จะเกิดอะไรขึ้นหากระบบติดตามวัตถุหนึ่งชิ้นอยู่แล้ว แต่จากนั้นตรวจจับวัตถุอื่นที่คล้ายกัน? และจะเกิดอะไรขึ้นหากวัตถุที่ถูกติดตามถูกบดบังชั่วคราวโดยอีกวัตถุหนึ่ง? คุณสามารถอธิบายตรรกะของระบบได้ไหม?
ก: ระบบได้รับการออกแบบมาเพื่อให้ผู้ประกอบการเลือกวัตถุที่น่าสนใจ. สิ่งนี้ทำได้โดยใช้รีโมตคอนโทรลเลอร์, ที่ผู้ใช้สามารถเลื่อนเคอร์เซอร์บนหน้าจอไปยังเป้าหมายที่พวกเขาต้องการติดตาม. อัลกอริทึมการตรวจจับสามารถจดจำวัตถุหลายชิ้นได้ในเวลาเดียวกัน, แต่เอ็นจินการติดตามสามารถทำตามเป้าหมายเดียวได้อย่างแข็งขัน. หากวัตถุใหม่ปรากฏขึ้นในขณะที่มีการติดตามแล้ว, ระบบจะไม่สลับโดยอัตโนมัติเว้นแต่ผู้ประกอบการตัดสินใจเปลี่ยนเป้าหมายด้วยตนเอง. ในกรณีที่วัตถุที่เลือกถูกบดบังชั่วคราว (ตัวอย่างเช่น, ยานพาหนะหนึ่งผ่านหน้าอีกคัน), ระบบอาจสูญเสียการล็อคเป้าหมายขึ้นอยู่กับระยะเวลาและเงื่อนไขของการบดเคี้ยว. เมื่อการบดเคี้ยวล้าง, Reacquisition อาจเกิดขึ้นหรือไม่เกิดขึ้นโดยอัตโนมัติ, ดังนั้นอาจจำเป็นต้องมีการแทรกแซงของผู้ประกอบการในสถานการณ์ที่ท้าทาย.
Q: โปรโตคอล UART ที่ใช้สำหรับการสื่อสาร? มันคือ crsf, mavlink, หรืออย่างอื่น? โปรโตคอลมีอะไรบ้าง? มันส่งช่องควบคุมหรือไม่, แพ็คเก็ตพิเศษ, หรือข้อมูลประเภทอื่น ๆ? ด้วย, โมดูลของคุณแนะนำระหว่างตัวรับสัญญาณและตัวควบคุมเที่ยวบินเท่าไหร่?
ก: โมดูลรองรับไฟล์ โปรโตคอล CRSF, ซึ่งใช้กันอย่างแพร่หลายเพื่อความน่าเชื่อถือ, การสื่อสารที่มีความถี่ต่ำระหว่างผู้รับและตัวควบคุมเที่ยวบิน. ภายในโปรโตคอล, การแลกเปลี่ยนข้อมูลรวมถึงข้อมูลช่องมาตรฐาน, แพ็คเก็ต Telemetry, และข้อมูลที่เกี่ยวข้องกับการควบคุมอื่น ๆ. มันเป็นไปตามโครงสร้างเดียวกันกับที่คอนโทรลเลอร์เที่ยวบินได้รับการออกแบบมาแล้ว, ดังนั้นจึงไม่จำเป็นต้องมีการแยกวิเคราะห์หรือแปลเพิ่มเติมที่ด้านผู้ใช้. เนื่องจากโมดูลการติดตามตั้งอยู่ระหว่างตัวรับสัญญาณและตัวควบคุมเที่ยวบิน, การพิจารณาที่สำคัญคือเวลาแฝง. ในทางปฏิบัติ, เวลาแฝงที่เพิ่มเข้ามานั้นน้อยที่สุด - การทดสอบของเราแสดงให้เห็นว่ามีส่วนช่วยเกี่ยวกับ 10 มิลลิวินาที, ซึ่งเล็กน้อยสำหรับวัตถุประสงค์ในการควบคุมเที่ยวบิน.
Q: ขอดูซอฟต์แวร์หรือคำอธิบายอย่างน้อย? การทำความเข้าใจกับตัวเลือกการกำหนดค่าเป็นสิ่งสำคัญสำหรับฉัน.
ก: ใช่. เราจะให้ไฟล์ คู่มือการใช้งานมาตรฐาน สำหรับโมดูล. เอกสารนี้จะอธิบายอินเทอร์เฟซซอฟต์แวร์, ตัวเลือกการกำหนดค่าที่มีอยู่, และวิธีการปรับเปลี่ยนกรณีการใช้งานเฉพาะของคุณ. มันจะทำหน้าที่เป็นข้อมูลอ้างอิงเพื่อให้ผู้ใช้สามารถเข้าใจวิธีการตั้งค่าและปรับแต่งระบบตามความต้องการของพวกเขาอย่างเต็มที่.
Q: คำถามที่สำคัญยิ่งขึ้น: โมดูลเองไม่ได้ควบคุมวัตถุโดยตรง - มันให้ข้อมูลการกระจัดแบบสัมพัทธ์เท่านั้น. ไม่จำเป็นต้องแก้ไข betaflight เพื่อประมวลผลข้อมูลการกระจัดนี้? หรือมีวิธีอื่น?
ก: ไม่มีการดัดแปลง Betaflight จำเป็น. ระบบได้รับการออกแบบให้ทำงานกับ betaflight เหมือนเดิม. จำเป็นต้องดำเนินการขั้นตอนการกำหนดค่าอย่างง่าย ๆ ภายในระบบ BetaFlight เพื่อรวมข้อมูลการกระจัดอย่างเหมาะสม. ขั้นตอนทั้งหมดเหล่านี้จะมีรายละเอียดในคู่มือผู้ใช้, ดังนั้นผู้ประกอบการสามารถทำตามคำแนะนำที่ชัดเจนโดยไม่ต้องแก้ไขเฟิร์มแวร์หรือรหัส.
Q: เกี่ยวกับโมดูลการถ่ายภาพความร้อน-คุณให้เอาต์พุตความล่าช้าต่ำเช่น MIPI CSI-2 หรือ USB 3.0, หรือเป็นเพียง USB? ฉันได้เห็นโมดูล USB หลายตัวที่ใช้ ASIC Chips เพื่อจับภาพวิดีโอ CVBS, และแต่ละขั้นตอนในไปป์ไลน์การประมวลผลต้องใช้บัฟเฟอร์เฟรม, ซึ่งเพิ่มเวลาแฝงที่เห็นได้ชัดเจน. มีวิธีแก้ปัญหาที่เร็วกว่าหรือไม่?
ก: การออกแบบของเราขึ้นอยู่กับกรรมสิทธิ์ ชิป ASIC สำหรับการประมวลผลภาพ. ไม่เหมือนกับโมดูล USB ทั่วไปจำนวนมาก, ภาพในระบบของเราไม่จำเป็นต้องผ่านหน่วยความจำภายนอกหรือหลายขั้นตอนบัฟเฟอร์, ซึ่งช่วยลดเวลาแฝงอย่างมีนัยสำคัญ. สำหรับกล้องแสงที่มองเห็นได้, ความล่าช้าแบบ end-to-end ที่วัดได้จากการจับภาพไปยังเอาต์พุตการส่งสัญญาณอยู่ภายใน 50 มิลลิวินาที. อินฟราเรด (ความร้อน) เส้นทางการถ่ายภาพมีเวลาแฝงที่สูงขึ้นเล็กน้อยเนื่องจากการประมวลผลเพิ่มเติมที่เกี่ยวข้อง. หากเปิดใช้งานคุณสมบัติการจดจำออนบอร์ด, ความล่าช้าของระบบสามารถเพิ่มขึ้นได้หลายสิบมิลลิวินาที, ขึ้นอยู่กับความซับซ้อนของงาน. อย่างไรก็ตาม, ภายใต้สภาวะการทำงานปกติ, เวลาแฝงทั้งหมดคือ อยู่ใต้ 100 มิลลิวินาที, ซึ่งเหมาะสำหรับการนำร่อง UAV และแอปพลิเคชันการตรวจสอบแบบเรียลไทม์.
ถามคำถาม
ข้อความของคุณถูกส่งแล้ว