02 HVS 融合视觉
我方相机基于锐视智芯(AlpsenTek)HVS 融合视觉芯片。HVS(Hybrid Vision Sensor)把传统图像(APS)与事件(EVS)融合在同一片像素阵列里,是本产品区别于纯事件相机的核心差异点。事件原理见 基础原理,数据格式见 数据格式。
1. 什么是 HVS
HVS 不是"两个传感器拼在一起",而是同一片像素阵列中的每个像素,同时具备图像采样链路与事件检测电路。因此一颗芯片能同时输出:
- APS 图像流:传统整幅图像帧(RAW),带纹理与色彩;
- EVS 事件流:异步事件
(x, y, p, t),记录像素级亮度变化。
两路在像素级、微秒级时间同步——没有视差,也不需要事后对齐。
2. 三种工作模式
| 模式 | 输出 | 何时用 |
|---|---|---|
| 图像模式(APS) | 整幅图像帧(RAW) | 静态场景、需要纹理 / 色彩 / 细节 |
| 事件模式(EVS) | 异步事件流 (x, y, p, t) | 高速运动、低延迟、低功耗 |
| 融合模式(HVS) | 图像 + 事件双流同步 | 既要细节又要高速响应(大多数落地场景) |
3. 像素级融合 vs 传感器级融合
| 传感器级融合 | 像素级融合(HVS / 我方) | |
|---|---|---|
| 做法 | 两颗独立传感器(APS + EVS)并排 | 同一像素内集成图像 + 事件两路 |
| 视差 | 有(两颗传感器视角不同) | 零视差 |
| 时间同步 | 需事后对齐 | 像素级、微秒级天然同步 |
| 体积 / 成本 | 大 / 高 | 单芯片 |
我方芯片在像素内以 iampCOMB / GESP / IN-PULSE DiADC 等架构配合 PixMUX 时分复用读出,采用 BSI 堆叠工艺与像素间隔离,实现"感存算一体"的像素级融合。

光电二极管分出图像采样链路与事件检测电路两路,分别输出 APS 帧与 EVS 事件。
4. 双流协同:看得清 + 看得快
APS 与 EVS 各有所长,融合后互补:
- APS 管看得清:纹理、色彩、静止细节——目标"是什么"。
- EVS 管看得快:高速变化、低延迟、低带宽、>120dB 高动态范围——目标"在怎么动"。
典型协同:用 APS 给出场景上下文(背景、纹理),用 EVS 在同一画面上叠加高速运动轨迹;或用 EVS 触发低功耗"有动静",再唤醒 APS 出图。

同一高速运动场景,APS 给出清晰图像帧、EVS 给出事件点轨迹,两路融合为同一画面。
5. HVS vs 纯 EVS 怎么选
- 纯 EVS(索尼 / Prophesee 的纯事件路线):追求事件的极致性能(更高极限帧率、更低延迟),但通常不输出图像,适合成本不敏感、不需要图像上下文的超高速专用场景。
- HVS(我方):一颗粒兼顾图像与事件,等效高速响应 + 高动态范围,成本低、体积小,适合既要画面又要事件的大多数落地场景(识别、监控、交互、SLAM 等)。
6. 在我方产品上怎么用
- USB 相机(如 CF-NRS1):APS + EVS 双流经 USB3.0 输出,MultiVision Studio 可同屏预览两路。
- MIPI 模块(如 EVS_003,基于 APX003):双流经 MIPI CSI 输出到载板,RDK X5 上的
dual_vc_vin_src/evs_live_player提供双流实时显示与录制。 - 编程采集:APS 走
HV_Camera::startImageCapture,EVS 走startEventCapture,同时启动即 HVS 双流最小演示——见 编程指引 07 采集 APS 图像。完整 API 见 Toolkit API。
