热图像可见光相机目标跟踪AI板的Betaflight

热图像可见光相机目标跟踪AI板的Betaflight

AI驱动的全天候目标检测和识别 200 米

介绍

热的 + 数字双凸轮

• 双光融合成像

• 可见的 / 热的 / 快速识别 / 清晰的见解

• 超紧凑 / 超光 / 超稳

该 可见的热双镜头相机 是一个 双模式成像融合模块 专为无人机设计. 它无缝集成 可见光成像, 红外热成像, 和双光谱融合成像 进入一个紧凑的单元. 以高级为特色 运动稳定 和 全天候成像功能, 它确保在动态环境中可靠的性能.

安装在无人机上, 该模块可以准确 行人和车辆检测 在一个范围内 10 至 200 米, 使其理想 FPV赛车无人机, 小型无人机, 无人机gimbals, 和其他航空应用.

关键特点

• 高敏性 氧化钒未冷的检测器

• 支持 AI超分辨率, 输出分辨率达到 720 × 576

• 内建的 AI处理 能力

• 低延迟 成像性能

• 超低功耗: < 0.8W¯¯

• 紧凑型设计 具有很高的整合: 20 × 20 × 36 毫米

产品采用 模块化设计 为了灵活性和易于集成.

• 双光谱成像模块: 23 × 36 毫米

• 图像处理模块: 36 × 36 毫米

• 超轻量级: < 37 G

完全 与开源飞行控制器兼容 如 Beta飞行, 和别的, 可以 安装在少于无人机上 5 分钟, 确保快速部署和用户便利.

双凸轮模块

• 柔性切换之间 可见光, 红外线的, 和 双光融合视频

• 支持 电子变焦 可增强细节

• 超低延迟 (<60 毫秒) 模拟输出 用于实时决策

• 集成 AI功能 用于智能成像

图像AI处理模块

• 图像增强: 包含高级算法，包括 3D降噪, 广泛的动态范围 (宽动态), 和 不均匀性校正 (nuc)

• 高频振动抑制: 支持 电子3D防震 和 图像稳定 对于清晰稳定的视觉效果

• 双光谱融合: 启用 可见和热成像视频的实时融合, 提出卓越的情境意识

通过集成 深度学习算法 同 高性能AI芯片, 系统提供 全场自动目标识别和跟踪. 这不仅是 减少飞行员工作量 但也会增强 自动导航 并确保 精确的任务执行.

电子图像稳定

• 多轴校正: 有效消除水平, 垂直, 和旋转振动

• 子像素运动补偿: 通过精确协调 IMU 和 图像传感器数据 为了更顺畅, 更清晰的成像

多目标识别

• 自动检测和识别 行人和车辆 中 200 米

• 能够识别 30+ 实时目标 在整个视野中

引脚定义

终端 数	信号 代码	信号 名称
1	DCIN_5V-12V	电源
2	GND	地面
3	UART3_TX_3V3	UART传输
4	UART3_RX_3V3	UART收到
5	USB_DP	USB阳性
6	USB_DN	USB负面
7	GND	地面
8	pal_out	CVBS视频

规范

双传感器相机模块

模块 外形尺寸: 36.0mm×22.4mm×26.5mm (长×宽×高)

视频 产量: 720×576 CVBS模拟视频

数字的 热的

传感器 1920×1080 @50Hz传感器: 640×512@50Hz

场地 的 视图: 130°(H)×109°(V) 场地 的 视图: 35°(H)×28°(V)

低光 性能: 0.01 勒克斯 内德: <40MK

人工智能 图像 加工 模块

固件支持: Betaflight (仅用于betaflight, 不支持 Ardupilot)
显示模式: 数字,热的,双传感器融合
接口: CVBS视频,UART,USB2.0
模块尺寸: 36.0mm×36.0mm×9.2mm (长×宽×高)
电源: 5～25V
安装孔位置: 15.5mm×25.5mm

 

性能 产品规格	探测器 类型	钒 氧化物 未冷却 红外线的 焦点 飞机
	解析度	384×288,720×576(人工智能 超分辨率)
	核心框架速率	25赫兹、50赫兹
	响应带	8-14一个
	内德	≤40MK@25℃,F#1.0
功能性 产品规格	电动时间	<5小号
	亮度/对比度调整	手动/自动
	极性	白热 (默认)/黑色热/伪色彩
	十字路口	显示/隐藏(默认)/移动
	图像处理	过滤降噪,DDE,镜像(拉链)
电气 参数	数字视频输出	USB/BT.656
	模拟视频输出	CVBS接口(朋友:720×576)
	通讯接口	UART
	电源范围	DC 4.5-5V
	典型的功耗	<0.8在@25Hz中
物理 特征	核心大小	20mm×20mm×36mm
	重量	24G(包括镜头)
	工作温度	-40℃〜+ 65℃
光学的 镜片	焦距9.1mm(默认)	28°(H)×21°(V)
	焦距5.0mm	49°(H)×38°(V)
	焦距4.6mm	53°(H)×41°(V)

重量

附件

FPV AI DB-VISION ATR X1
飞行控制器连接电缆x 2
六角插座圆柱头螺钉M2*6 x 4

常问问题

Q: 我可以通过 USB-C 端口获得数字视频输出吗?
一个: 没有. 该设备上的USB-C端口主要用于调试和维护目的.

Q: 如何从设备访问视频流?
一个: 视频流通过网络通过RTSP提供. 您可以通过将设备连接到网络并使用兼容软件查看 RTSP 流来访问数字视频 (例如 VLC 或其他支持 RTSP 的播放器).

Q: 查看视频流的RTSP地址是多少?
一个: RTSP流可以使用以下地址访问:
rtsp://192.168.3.100/live.sdp

Q: 我需要将计算机的 IP 地址设置为 192.168.3.xxx?
一个: 是. 您的计算机和视频源必须位于 同一网段. 请将您计算机的IP地址设置为 192.168.3.xxx (例如, 192.168.3.101). 这可以确保您的计算机和视频源位于同一子网并且可以正常通信.

Q: 如何切换到热像仪?
一个: 需要使用PC控制软件 IR用户工具.

1. 打开 IR用户工具 在您的计算机上.
2. 去 输出设置.
3. 选择 视频源 作为 热像仪 要么 可见光相机 根据您的需求.
4. 选择所需的 伪彩色 (调色板) 对于热图像.

选择热像仪后, 视频流将输出 热图像.

Q: 摄像头接口是LVDS吗? 我可以将另一个 LVDS 摄像头连接到同一块板上吗?
一个: 没有. 相机接口是 米皮, 不是LVDS. 目前, 董事会 不支持连接额外的LVDS摄像头. 该板旨在与 内置MIPI摄像头接口, 并且不支持外部 LVDS 摄像头连接.

Q: 我可以 ping 通该设备, 但没有视频输出. 我应该怎么办?
一个: 你需要 更新设备软件 使用 PC 更新工具:

1. 跑步 Update_tool_en_V1.2.exe 在您的计算机上.
2. 升级设备 两次 与软件包:
   CCI6911-V3.1-SOC-APP-V1.0.0.28.

完成这些更新后, 视频输出应该可以正常工作.

Q: The throttle and pitch are swapped. How can we fix this?
一个: This issue is usually related to incorrect channel mapping on the remote controller. The throttle and pitch channels may be assigned the same or conflicting channel settings as the AI module, which results in control interference or incorrect input behavior.

为了解决这个问题, you need to reconfigure the remote controller channel settings (channel encoding). Please swap or remap the corresponding channels on the transmitter so that each function matches the correct channel assignment used by the AI module. After adjusting the channel mapping, the throttle and pitch controls should function normally.

Q: 我是否需要文件 AiGuidanceData5inches.bin 将其安装到飞控上?
一个: 是. 安装需要文件 AiGuidanceData5inches.bin. 需要使用PC配置工具irusertool.exe将该文件上传并安装到飞控上. 将飞控与电脑连接，通过此上位机软件完成安装.

1. 什么是双凸轮模块?
双凸轮模块是一个紧凑的 可见的热融合摄像头 为无人机设计, 支撑可见光, 红外线的, 和一个单元中的双光谱成像.

2. 双光融合成像如何工作?
双光融合成像组合 可见的轻型视频 同 热红外成像 在各种环境中提供更清晰的情境意识.

3. 双光谱融合的关键优势是什么?
双光谱融合改善 目标识别, 深度感知, 和可见性 在弱光或有雾条件下.

4. 相机模块的紧凑程度?
相机具有 23 × 36 MM双光谱模块 和一个 36 × 36 MM图像处理模块, 总重量不足 50G.

5. 可以快速安装在无人机上吗?
是, 模块是 即插即用 并且可以安装在无人机上 5 分钟.

6. 系统是否与开源飞行控制器兼容?
相机支持流行的飞行控制器 Betaflight, Ardupilot, 和其他开源平台.

7. 什么是最大检测范围?
系统可以检测并识别 行人和车辆 200 米.

8. 可以同时识别多少个目标?
AI引擎可以识别和跟踪 超过 30 实时目标 在视野内.

9. 系统是否支持AI驱动的识别?
是, 它整合 深度学习算法 同 AI芯片 对于 自动目标识别和跟踪.

10. 视频输出的延迟是什么?
该模块提供 超低延迟 (<60 女士) 模拟输出, 确保实时决策.

11. 系统是否支持电子变焦?
是, 双凸轮模块包括 电子变焦功能 用于灵活的观看.

12. 哪些算法用于图像增强?
AI处理模块集成 3D降噪, 广泛的动态范围 (宽动态), 和 不均匀性校正 (nuc).

13. 电子图像稳定如何工作?
它使用 多轴校正 和 子像素运动补偿 通过组合 IMU 和 传感器数据.

14. 系统是否会减少无人机振动效果?
是, 电子3D Deake Technology 抑制高频振动以进行光滑成像.

15. 模块可以在所有天气条件下运行吗?
是, 该 AI全天候检测系统 确保雾中的可靠操作, 雨, 和低光条件.

16. 哪种类型的传感器用于热成像?
它具有一个 高敏性氧化钒未冷的检测器.

17. 相机的热分辨率是什么?
模块支持 384 × 288 热分辨率, 增强 720 × 576 同 AI超分辨率.

18. 这个模块适合FPV赛车无人机?
是, 它是 超轻量级 (<50G) 和 低延迟输出 使其理想 FPV赛车无人机.

19. 可以在无人机上使用吗?
是, 该模块与 小型无人机gimbals 用于稳定成像.

20. 系统是否支持自主导航?
是, AI驱动的目标跟踪 支持 自主导航和任务执行.

21. 该模块如何减少飞行员工作量?
通过自动化 目标识别和跟踪, 系统最大程度地减少手动监视.

22. 模块的功耗是什么?
该系统是节能的, 消耗少于 0.8W¯¯.

23. 模块支持模拟视频输出吗?
是, 相机支持 低延迟模拟输出 用于FPV系统.

24. 模块可以在晚上检测目标吗?
是, 该 热红外成像 在完全黑暗中工作.

25. 这款相机适合狩猎应用吗?
是, 它是理想的选择 户外狩猎, 奉献 热和可见的双成像.

26. 它可以用于车辆援助和自动驾驶吗?
是, 系统支持 行人和车辆检测, 使其适合 ADAS申请.

27. 是在无人机飞行过程中抗振动的模块?
是, 它功能 电子图像稳定 和 振动抑制.

28. 系统可以识别多个移动目标吗?
是, AI处理器可以跟踪 更多 30 同时移动目标.

29. 无人机热成像的主要好处是什么?
热成像允许无人机 请参阅热签名, 启用 夜间操作和隐藏的目标检测.

30. AI超分辨率如何提高图像质量?
AI超分辨率高档热图像 384×288至720×576, 提高清晰度和细节.

31. 模块轻巧足以容纳小型无人机?
是, 重量小于 50G, 适合 迷你和微型无人机.

32. 模块可以支持精度任务吗?
是, 该 人工智能识别和跟踪 系统已优化 精确任务执行.

33. 它支持什么样的稳定?
它支持 多轴稳定, 减少由水平引起的模糊, 垂直, 和旋转运动.

34. 模块需要额外冷却吗?
没有, 它是基于 未冷却的热检测器, 确保低功率和简单集成.

35. 哪些应用程序从该模块中受益最大?
关键应用程序包括 无人机, FPV赛车, 打猎, 车辆协助, 和监视.

36. 它可以在有雾的条件下运行吗?
是, 该 双光融合成像 增强雾和低对比度环境的可见性.

37. 它在日光下如何表现?
在白天, 可见成像 提供详细的清晰度, 而 融合模式 与热数据结合使用可靠性.

38. 是系统模块化?
是, 它有一个 模块化设计 单独 双光谱成像 和 图像处理模块.

39. 系统可以多快开始工作?
它支持 快速部署, 安装后几分钟内进行操作.

40. 可以与基于AI的无人机软件集成吗?
是, 它与 AI导航和计算机视觉平台.

41. 是否适合安全监视的模块?
是, 它非常适合 监视无人机和外围监测.

42. 可以将模块用于SAR吗 (搜救)?
是, 该 热检测高达200m 帮助 找到失踪人员.

43. 系统是否支持实时决策?
是, 由于 <60毫秒延迟, 它提供 实时情境意识.

44. 图像处理模块提供什么样的输出?
模块输出 融合的可见热视频 随着稳定和AI增强.

45. 广泛的动态范围如何帮助?
WDR算法 提高场景的清晰度 高对比度照明.

46. 它可以用于农业无人机吗?
是, 热和可见的融合有助于 作物监测和牲畜跟踪.

47. 它是否支持自主无人机导航?
是, 它增强了 自动无人机导航 同 目标识别和跟踪.

48. 哪些行业可以从这个模块中受益?
行业包括 防御, 安全, 打猎, 无人机, 监视, 和自动驾驶.

49. 适合业余无人机飞行员的模块吗?
是, 它是 易于安装和轻巧的设计 使它有吸引力 业余爱好者和专业人士.

50. 为什么选择这个可见的热融合摄像头模块?
因为它结合了 AI驱动的成像, 双光融合, 低延迟, 紧凑的设计, 和全天候表演, 使其成为无人机用途最广泛的模块之一.

51. 它与Ardupilot兼容吗?
这个 样品是为Betaflight飞行控制而设计的; 不支持Ardupilot. Ardupilot更难调试, 响应时间较慢, 而且表现不如Betaflight. 结果是, 到目前为止，AI板样本尚未与Ardupilot一起使用. 适应可能不会立即.

51. 它与Ardupilot兼容吗?
是, 它具有USB Type-C视频信号输出到Raspberry Pi. 切换视频输出, 您可以使用UART命令切换输出. 可以是图片, 融合, 单个可见光, 单热成像相机视频. 我们的AI板可以将目标的位置信息提供给Raspberry Pi板. 我们的AI板可以在可见光的光线和热成像模式下向Raspberry Pi板输出人和车辆的距离信息.

从上面的视频中, 双融合相机模块的物理显示
1. 融合模式: 可见光和热成像融合 (图片中的图片)
2. 可见光模式
3. 热成像模式
4. Al目标识别
双光融合模式, 可见光模式, 热成像模式, AI识别模式可以切换!

Q52: 如果我们将您的相机模块连接到运行 Betaflight 的 SpeedyBee F405 飞行控制器, 摄像头模块是否使用MSP协议通过UART与飞控通信? 我们可以使用您的相机模块来控制 SpeedyBee F405 飞控吗?

质量保证: 是. 我们的相机模块支持使用 MSP 协议通过 UART 接口与 SpeedyBee F405 飞控进行通信. 一旦连接正确, 相机模块可以毫无问题地控制基于 Betaflight 的 SpeedyBee F405.