熱圖像可見光相機目標跟踪AI板的Betaflight

熱圖像可見光相機目標跟踪AI板的Betaflight

人工智能支持的全天候目標檢測和識別高達 200 米

介紹

熱的 + 數碼雙攝像頭

• 雙光融合成像

• 可見的 / 熱的 / 快速識別 / 清晰的洞察力

• 超緊湊 / 超輕 / 超穩定

該 可見熱雙鏡頭相機 是一個 雙模成像融合模塊 專為無人機設計. 它無縫集成 可見光成像, 紅外熱成像, 和雙光譜融合成像 集成到一個緊湊的單元中. 具有先進的 運動穩定 和 全天候成像能力, 它確保動態環境中的可靠性能.

當安裝在無人機上時, 該模塊能夠準確 行人和車輛檢測 在一定範圍內 10 至 200 米, 使其理想 FPV競速無人機, 小型無人機, 無人機萬向節, 和其他空中應用.

主要特點

• 高靈敏度 氧化釩非製冷探測器

• 支持 AI超解, 輸出分辨率高達 720 × 576

• 內建 人工智能處理 能力

• 低延遲 成像性能

• 超低功耗: < 0.8W¯¯

• 緊湊型設計 集成度高: 20 × 20 × 36 毫米

該產品採用了 模塊化設計 靈活性和易於集成.

• 雙光譜成像模塊: 23 × 36 毫米

• 圖像處理模塊: 36 × 36 毫米

• 超輕量: < 37 G

它完全是 兼容開源飛行控制器 如 測試飛行, 和別的, 並且可以是 安裝在無人機上的時間少於 5 分鐘, 確保快速部署和用戶便利.

雙攝像頭模塊

• 之間靈活切換 可見光, 紅外線的, 和 雙光融合視頻

• 支持 電子變焦 為了增強細節

• 超低延遲 (<60 毫秒) 模擬輸出 用於實時決策

• 集成 人工智能能力 用於智能成像

圖像AI處理模塊

• 圖像增強: 結合了先進的算法，包括 3D 降噪, 寬動態範圍 (寬動態), 和 非均勻性校正 (全國統一大學)

• 高頻振動抑制: 支持 電子3D防抖 和 圖像穩定 以獲得清晰穩定的視覺效果

• 雙光譜融合: 啟用 可見光和熱成像視頻實時融合, 提供卓越的態勢感知能力

通過集成 深度學習算法 同 高性能AI芯片, 系統提供 全視野自動目標識別與跟踪. 這不僅 減少飛行員的工作量 但也增強了 自主導航 並確保 精準執行任務.

電子圖像穩定

• 多軸校正: 有效消除橫向, 垂直, 和旋轉振動

• 亞像素運動補償: 通過精準協調實現 IMU 和 圖像傳感器數據 為了更順暢, 成像更清晰

多目標識別

• 自動檢測並識別 行人和車輛 中 200 米

• 能夠識別 30+ 實時目標 越過視野

引腳定義

終端 數	信號 代碼	信號 名稱
1	DCIN_5V-12V	電源
2	GND	地面
3	UART3_TX_3V3	串口發送
4	UART3_RX_3V3	串口接收
5	USB_DP	USB正極
6	USB_DN	USB 負極
7	GND	地面
8	PAL_輸出	CVBS視頻

規範

雙傳感器攝像頭模塊

模塊 外形尺寸: 36.0毫米×22.4毫米×26.5毫米 (長×寬×高)

視頻 產量: 720×576 CVBS 模擬視頻

數字的 熱的

傳感器 1920×1080 @50Hz 傳感器: 640×512@50Hz

場地 的 看法: 130°(H)×109°(V) 場地 的 看法: 35°(H)×28°(V)

低光 性能: 0.01 勒克斯 尼德特: <40MK

人工智慧 圖像 加工 模塊

固件支持: Betaflight (僅適用於 Betaflight 的示例, 不支持 Ardupilot 尚未)
顯示模式: 數字,熱的,雙傳感器融合
接口: CVBS視頻,UART,USB2.0
模塊尺寸: 36.0毫米×36.0毫米×9.2毫米 (長×寬×高)
電源: 5～25V
安裝孔位置: 15.5毫米×25.5毫米

 

性能 產品規格	偵測器 類型	釩 氧化物 未冷卻 紅外線的 焦點 飛機
	解析度	384×288,720×576(人工智慧 超分辨率)
	核心幀率	25赫茲、50赫茲
	響應帶	8-14一個
	尼德特	≤40mk@25℃,F#1.0
功能 產品規格	開機時間	<5小號
	亮度/對比度調整	手動/自動
	極性	白熱化 (默認)/黑熱/偽彩
	十字線	顯示/隱藏(默認)/移動
	圖像處理	過濾降噪,直達DE,鏡射(英寸頭枕顯示器枕袋)
電力 參數	數字視頻輸出	USB/BT.656
	模擬視頻輸出	CVBS接口(朋友:720×576)
	通訊介面	UART
	電源範圍	直流4.5-5V
	典型功耗	<0.8功率@25Hz
物理 特徵	核心尺寸	20毫米×20毫米×36毫米
	重量	24G(包括鏡頭)
	工作溫度	-40℃〜+ 65℃
光學的 鏡片	焦距9.1毫米(默認)	28°(H)×21°(V)
	焦距5.0mm	49°(H)×38°(V)
	焦距4.6毫米	53°(H)×41°(V)

重量

附件

FPV AI DB-Vision ATR x1
飛控連接線 x 2
內六角圓柱頭螺釘 M2*6 x 4

常問問題

Q: Can I get digital video output through the USB-C port?
一個: 沒有. The USB-C port on this device is mainly used for debugging and maintenance purposes.

Q: How can I access the video stream from the device?
一個: The video stream is provided through the network via RTSP. You can access the digital video by connecting the device to the network and viewing the RTSP stream using compatible software (such as VLC or other RTSP-supported players).

Q: What is the RTSP address to view the video stream?
一個: The RTSP stream can be accessed using the following address:
rtsp://192.168.3.100/live.sdp

Q: Do I need to set my computer’s IP address to 192.168.3.xxx?
一個: 是. Your computer and the video source must be on the same network segment. Please set your computer’s IP address to 192.168.3.xxx (例如, 192.168.3.101). This ensures that your computer and the video source are on the same subnet and can communicate properly.

Q: How can I switch to the thermal camera?
一個: You need to use the PC control software IRUserTool.exe.

1. 打開 IRUserTool.exe 在您的計算機上.
2. 去 Output Settings.
3. 選擇 視頻源 作為 熱像儀 要么 Visible Camera depending on your needs.
4. Choose the desired pseudo-color (palette) for the thermal image.

After selecting the thermal camera, the video stream will output the thermal image.

Q: Is the camera interface LVDS? Can I connect another LVDS camera to the same board?
一個: 沒有. The camera interface is 米皮, not LVDS. 目前, the board does not support connecting an additional LVDS camera. The board is designed to work with the built-in MIPI camera interface, and it does not provide support for external LVDS camera connections.

Q: I can ping the device, but there is no video output. 我該怎麼辦?
一個: You need to update the device software using the PC update tool:

1. 跑步 Update_tool_en_V1.2.exe 在您的計算機上.
2. Upgrade the device 兩次 with the software package:
   CCI6911-V3.1-SOC-APP-V1.0.0.28.

After completing these updates, the video output should work correctly.

Q: Do I need the file AiGuidanceData5inches.bin to install it on the flight controller?
一個: 是. The file AiGuidanceData5inches.bin is required for the installation.

You need to use the PC configuration tool irusertool.exe to upload and install this file to the flight controller. The installation is completed through this upper-computer software by connecting the flight controller to your computer.

1. 什麼是雙攝像頭模塊?
雙攝像頭模塊是一款緊湊型 可見光熱融合相機 專為無人機設計, 支持可見光, 紅外線的, 和雙光譜成像在一個單元中.

2. 雙光融合成像如何工作?
雙光融合成像結合 可見光視頻 同 熱紅外成像 在各種環境下提供更清晰的態勢感知.

3. 雙頻譜融合的主要優勢是什麼?
雙頻譜融合改善 目標識別, 深度知覺, 和能見度 在弱光或有霧的條件下.

4. 攝像頭模組有多緊湊?
該相機具有 23 × 36 毫米雙光譜模塊 和一個 36 × 36 毫米圖像處理模塊, 總重量低於 50G.

5. 模塊可以快速安裝在無人機上嗎?
是, 模塊是 即插即用 並且可以在不到時間內安裝在無人機上 5 分鐘.

6. 系統是否兼容開源飛控?
該相機支持流行的飛行控制器，例如 Betaflight, Ardupilot, 和其他開源平台.

7. 最大檢測範圍是多少?
系統可以檢測並識別 行人和車輛最多 200 米.

8. 可以同時識別多少個目標?
AI引擎可識別、追踪 超過 30 實時目標 視野內.

9. 系統是否支持AI識別?
是, 它集成了 深度學習算法 同 人工智能芯片 對於 自動目標識別與跟踪.

10. 視頻輸出的延遲是多少?
該模塊提供 超低延遲 (<60 女士) 模擬輸出, 確保實時決策.

11. 系統是否支持電子變焦?
是, 雙攝像頭模塊包括 電子變焦功能 靈活查看.

12. 圖像增強使用哪些算法?
AI處理模塊集成 3D 降噪, 寬動態範圍 (寬動態), 和 非均勻性校正 (全國統一大學).

13. 電子圖像穩定的工作原理?
它使用 多軸校正 和 亞像素運動補償 通過結合 IMU 和 感測器數據.

14. 該系統是否可以減少無人機振動的影響?
是, 電子3D防抖技術 抑制高頻振動以實現平滑成像.

15. 模塊能否全天候工作?
是, 該 AI全天候檢測系統 確保霧中可靠運行, 雨, 和弱光條件下.

16. 熱成像使用什麼類型的傳感器?
它具有一個 高靈敏度氧化釩非製冷探測器.

17. 相機的熱分辨率是多少?
該模塊支持 384 × 288 熱分辨率, 增強為 720 × 576 同 AI超解.

18. 該模塊適用於FPV競速無人機嗎?
是, 它是 超輕量級 (<50G) 和 低延遲輸出 使其成為理想的 FPV競速無人機.

19. 可以用在無人機雲台上嗎?
是, 該模塊兼容 小型無人機萬向節 用於穩定成像.

20. 系統是否支持自主導航?
是, 人工智能驅動的目標跟踪 支持 自主導航和任務執行.

21. 該模塊如何減少飛行員的工作量?
通過自動化 目標識別與跟踪, 系統最大限度地減少人工監控.

22. 模塊功耗是多少?
系統節能, 消耗少於 0.8W¯¯.

23. 模塊是否支持模擬視頻輸出?
是, 相機支持 低延遲模擬輸出 用於 FPV 系統.

24. 模塊夜間能否探測到目標?
是, 該 熱紅外成像 在完全黑暗的環境下工作.

25. 這款相機適合打獵應用嗎?
是, 它非常適合 戶外狩獵, 奉獻 熱成像和可見光雙成像.

26. 能否用於車輛輔助和自動駕駛?
是, 系統支持 行人和車輛檢測, 使其適合 高級駕駛輔助系統應用.

27. 無人機飛行過程中模塊是否抗振?
是, 它功能 電子圖像穩定 和 振動抑制.

28. 系統能否識別多個移動目標?
是, AI處理器可以跟踪 更多 30 同時移動目標.

29. 無人機熱成像的主要好處是什麼?
熱成像讓無人機能夠 查看熱特徵, 使能 夜間行動和隱藏目標檢測.

30. AI超解如何提升圖像質量?
AI 超分辨率升級了熱圖像 384×288至720×576, 提高清晰度和細節.

31. 該模塊是否足夠輕，適合小型無人機?
是, 重量小於 50G, 適合 迷你和微型無人機.

32. 模塊能否支持精準任務?
是, 該 AI識別與追踪 系統針對以下方面進行了優化 精準任務執行.

33. 它支持什麼樣的穩定?
它支持 多軸穩定, 減少水平方向造成的模糊, 垂直, 和旋轉運動.

34. 模塊是否需要額外冷卻?
沒有, 它基於一個 非製冷熱探測器, 確保低功耗和簡單集成.

35. 哪些應用程序從該模塊中受益最多?
主要應用包括 無人機, FPV賽車, 打獵, 車輛援助, 和監視.

36. 能在霧天作業嗎?
是, 該 雙光融合成像 增強霧和低對比度環境中的可見度.

37. 白天的表現如何?
白天, 可見光成像 提供詳細的清晰度, 而 融合模式 與熱數據相結合以提高可靠性.

38. 系統是否模塊化?
是, 它有一個 模塊化設計 與單獨的 雙光譜成像 和 圖像處理模塊.

39. 系統多快可以開始工作?
它支持 快速部署, 安裝後幾分鐘內即可運行.

40. 能否與基於人工智能的無人機軟件集成?
是, 它兼容 人工智能導航和計算機視覺平台.

41. 該模塊適合安防監控嗎?
是, 它非常適合 監控無人機和周界監控.

42. 該模塊可以用於SAR嗎 (搜救)?
是, 該 熱探測距離可達200​​m 幫助 找到失踪人員.

43. 系統是否支持實時決策?
是, 由於 <60毫秒延遲, 它提供 實時態勢感知.

44. 圖像處理模塊提供什麼樣的輸出?
模塊輸出 融合可見熱視頻 具有穩定性和人工智能增強功能.

45. 寬動態範圍有何幫助?
寬動態算法 提高場景清晰度 高對比度照明.

46. 可以用在農業無人機上嗎?
是, 熱融合和可見光融合有助於 農作物監測和牲畜追踪.

47. 是否支持無人機自主導航?
是, 它增強了 無人機自主導航 同 目標識別與跟踪.

48. 哪些行業可以從該模塊中受益?
行業包括 防禦, 安全, 打獵, 無人機, 監視, 和自動駕駛.

49. 該模塊是否適合業餘無人機飛行員?
是, 它是 易於安裝和輕量化設計 使其具有吸引力 愛好者和專業人士.

50. 為什麼選擇這款可見熱融合相機模塊?
因為它結合了 AI 驅動的成像, 雙光融合, 低延遲, 緊湊的設計, 和全天候性能, 使其成為無人機最通用的模塊之一.

51. 與Ardupilot兼容嗎?
這個 樣品專為 Betaflight 飛行控製而設計; 不支持Ardupilot. Ardupilot 更難調試, 響應時間較慢, 並且性能不如 Betaflight. 因此, 到目前為止，AI 板示例尚未與 Ardupilot 一起使用. 適應可能不會立即發生.

51. 與Ardupilot兼容嗎?
是, 它具有 USB Type-C 視頻信號輸出至 Raspberry Pi. 切換視頻輸出, 您可以使用UART命令來切換輸出. 可以是畫中畫, 融合, 單一可見光, 單熱像儀視頻. 我們的AI板可以向Raspberry Pi板提供目標的位置信息. 我們的AI板可以將可見光和熱成像模式下的人和車輛的脫靶距離信息輸出到Raspberry Pi板.

從上面的視頻來看, 雙融合攝像頭模組實物展示
1. 融合模式: 可見光與熱成像融合 (畫中畫)
2. 可見光模式
3. 熱成像模式
4. 人工智能目標識別
雙光融合模式, 可見光模式, 熱成像模式, 並且AI識別模式可以切換!

Q52: 如果我們將您的相機模塊連接到運行 Betaflight 的 SpeedyBee F405 飛行控制器, 攝像頭模塊是否使用MSP協議通過UART與飛控通信? 我們可以使用您的相機模塊來控制 SpeedyBee F405 飛控嗎?

質量保證: 是. 我們的相機模塊支持使用 MSP 協議通過 UART 接口與 SpeedyBee F405 飛控進行通信. 一旦連接正確, 相機模塊可以毫無問題地控制基於 Betaflight 的 SpeedyBee F405.