热的 & 可见的轻型AI相机模块 - 常见问题和指南
人工智能网络摄像机
目录
请提供有关此惊人模块的更多信息.
这是一个双光谱成像模块 专为无人机设计, 在单个紧凑的单元中将可见光和红外热成像与双光谱融合整合. 主要特点包括:
- 全天候表演: 能够在白天检测和跟踪目标, 低光, 抽烟, 或雾.
- AI驱动的目标跟踪: 内置的AI算法自动识别并跟踪行人和车辆 200 米.
- 袖珍的 & 轻量级: 该模块是超紧凑的 (20 × 20 × 36 毫米) 和超光 (<37 G), 使安装在无人机上很容易, gimbals, 和FPV系统.
- 低延迟 & 高效的: 超低功耗 (<0.8 W¯¯) 带有实时成像延迟 <60 女士.
它如何与betaflight集成?
该模块与开源飞行控制器（例如Betaflight. 集成功能:
- 视频输出: FPV或遥测集成的标准视频输出接口.
- 数据接口: 支持UART/I2C将AI识别数据或目标坐标传输到飞行控制器, 允许飞行系统使用此数据进行自主或辅助导航.
- 快速部署: 可以安装并集成 5 分钟由于其模块化设计.
它只能控制吗, 还是可以控制无人机?
AI模块本身可以直接控制无人机的飞行. 它提供智能成像和目标跟踪数据. 然后，飞行控制器可以基于此信息做出决定，以进行导航或执行任务.
AI模块配备了 UART接口 连续传输检测到目标的实时位置数据, 例如人类和车辆, 直接到飞行控制器. 通过接收这些精确的坐标, 飞行控制器可以 动态调整无人机的态度, 方向, 和飞行路径, 启用自主目标跟踪和智能导航. 这种无缝的数据交换使无人机得以 实时对移动目标做出反应, 在关注或观察目标时保持稳定的飞行, 并通过最少的操作员干预执行复杂任务. AI感知和飞行控制的整合提高了操作效率和任务安全, 使其非常适合监视, 检查, 和搜索应用程序.
AI是否识别可见图像或热标志?
该模块支持确定人和汽车的可见光和热图像.
- 可见的光识别: 对于白天或光线充足的环境.
- 热成像识别: 晚上或低可见性条件.
- 双光谱融合: 实时结合可见和热成像，以提高情境意识和准确性.
我可以看到来自热摄像机的组合图像吗?
是, 该模块支持目标识别和跟踪. 曾经是目标 (人或车辆) 被检测到, 无人机可以通过遥控器切换到图像引导模式. 激活后, 该模块通过UART将实时目标位置数据发送到飞行控制器, 允许无人机调整其态度并自动遵循目标.
模块如何物理连接到无人机?
该模块有两个UART接口:
- 一个UART连接到UAV的远程接收器.
- 另一个UART连接到飞行控制器.
视频输出通过CVBS接口提供, 可以通过视频传输系统传输.
模块如何配置和设置?
有两种配置模块的方法:
- Handheld-Wireless-Receiver-7-Touch-Screen-COFDM-Receiver-Digital-Video-Receiver-with-7-inch-Monitor.jpg Betaflight 无人机飞行控制器调整软件.
- 使用制造商的 基于PC的软件 用于模块配置.
将为这两个软件工具提供详细的操作说明和用户手册.
目标获取是自动或手动的?
该模块执行自动目标检测. 启用识别并通过遥控器选择目标后, 无人机可以输入图像引导模式并自动遵循目标.
模块如何处理无人机控件, 特别是垂直运动?
水平偏航控制很简单. 垂直运动需要协调的音高和节气门控制，以保持跟踪精度并避免失去目标. 该模块提供目标位置数据，以帮助飞行控制器保持稳定的跟踪.
更多常见问题解答
Q: 如果系统检测到多个对象, 它如何决定遵循哪一个? 如果系统已经在跟踪一个对象，然后检测另一个类似对象，会发生什么? 如果轨道对象暂时被另一个遮挡，会发生什么? 你能描述系统逻辑吗?
一个: 该系统旨在允许操作员选择感兴趣的对象. 这是使用遥控器完成的, 用户可以将屏幕上的光标移至他们想要跟踪的目标. 检测算法可以同时识别多个对象, 但是跟踪引擎只能积极遵循一个目标. 如果在跟踪一个新对象时出现新对象, 除非操作员决定手动更改目标，否则系统不会自动切换. 在暂时遮住所选对象的情况下 (例如, 一辆车在另一辆车前), 系统可能会根据遮挡的持续时间和条件而失去目标锁定. 一旦阻塞清除, 重新计算可能会自动或可能不会自动发生, 因此，在具有挑战性的情况下可能需要进行操作员干预.
Q: 什么UART协议用于通信? 是CRSF吗？, mavlink, 或其他? 该协议包含什么? 它是否传输控制通道, 特殊数据包, 或其他类型的数据? 也, 您的模块在接收器和飞行控制器之间引入多少延迟?
一个: 该模块支持 CRSF协议, 广泛用于可靠, 接收器和飞行控制器之间的低延迟通信. 内部协议, 交换的数据包括标准渠道信息, 遥测包, 和其他与控制相关的数据. 它遵循与飞行控制器已经设计为合作的结构, 因此，用户端无需进行其他解析或翻译. 由于跟踪模块位于接收器和飞行控制器之间, 一个重要的考虑因素是延迟. 实践, 附加的延迟是最小的 - 我们的测试表明它仅贡献 10 毫秒, 对于飞行控制目的而言，这可以忽略不计.
Q: 我可以看到该软件还是至少描述? 了解配置选项对我非常重要.
一个: 是. 我们将提供一个 标准操作手册 对于模块. 本文档将描述软件接口, 可用的配置选项, 以及如何对特定用例进行调整. 它将作为参考.
Q: 一个更关键的问题: 模块本身不能直接控制对象，它仅提供相对位移信息. 是否需要修改Betaflight才能处理此排量数据? 还是还有另一种方法?
一个: 没有修改 Betaflight 需要. 该系统旨在与Betaflight合作，因为它是. 仅需要在Betaflight系统中执行一些简单的配置步骤才能正确集成位移信息. 所有这些步骤将在用户手册中详细介绍, 因此，操作员可以在不修改固件或代码的情况下遵循明确的说明.
Q: 关于热成像模块 - 您提供的低延迟输出（例如MIPI CSI-2或USB） 3.0, 还是只有USB? 我看到了许多基于USB的模块，它们使用ASIC芯片捕获CVBS视频, 而且他们的处理管道中的每个步骤都需要框架缓冲, 增加了明显的延迟. 是否有更快的解决方案?
一个: 我们的设计基于专有 Asic芯片 用于图像处理. 与许多常规USB模块不同, 我们系统中的图像不需要浏览外部内存或多个缓冲区阶段, 这大大减少了延迟. 对于可见光相机, 从图像捕获到传输输出的端到端测量的端到端延迟在内 50 毫秒. 红外线 (热的) 由于涉及额外的处理，成像路径的延迟略高. 如果启用了板载识别功能, 系统延迟可以增加几十毫秒, 取决于任务的复杂性. 然而, 在正常运行条件下, 总延迟是 保持在下面 100 毫秒, 适用于无人机驾驶和实时监控应用.
问一个问题
感谢您的回复。 ✨