Technology

DVS 动态视觉
传感器技术

DVS(Dynamic Vision Sensor,动态视觉传感器),又称事件相机(Event-based Vision Sensor),是一种全新范式的视觉感知器件。

它不再以"帧"为单位记录画面,而是让每个像素独立地、异步地感知光强变化——一旦变化超过阈值,立刻以微秒级延迟输出一个事件(包含坐标、时间戳与极性)。

这种以"运动"为核心的输出形式,使 DVS 在高速、强光照变化、低延迟、低数据率等严苛场景下展现出传统帧式相机难以比拟的优势,被广泛用于工业检测、机器人、自动驾驶、科学测量与人机交互等领域。

<1μs
微秒级延迟
像素级独立响应,无需等待全局曝光
120dB+
超宽动态范围
对数响应,隧道到强光无缝适应
极低
数据量
仅输出变化像素,数据量减少 90%+

DVS 真正记录的不是"画面",而是画面中正在发生的"光强变化"

What is DVS

DVS 捕捉的是
光强的变化

DVS 真正记录的不是"画面",而是画面中正在发生的"光强变化"。

它的设计灵感来自生物视觉系统。人眼视网膜上的感光细胞在受光后会将光信号转换为电信号,经双极细胞与神经节细胞处理后由视神经传递至视觉皮层;这一通路天生就对"变化"敏感,对静止背景几乎不耗费认知资源。

DVS 在硅基上模拟了类似的过程:入射光在像素内的光电二极管中转换为电流,再经 I/V 转换形成电压;亮度检测电路实时比较当前电压与参考电压的差值,一旦差值超过预设阈值,比较器立即触发一个事件——亮度上升输出"正事件",亮度下降输出"负事件"。整个过程在每个像素内独立闭环,无需等待全局曝光,因此能够以接近物理极限的速度感知运动。

人眼视觉与 DVS 信号通路对比示意图

人眼视觉通路(上)与 DVS 像素信号链路(下)的仿生对应

Mechanism

核心工作机制

每个像素独立异步运行,仅当亮度变化超过阈值时才输出事件

事件即输出

在 DVS 内部,每个像素都拥有自己独立的"感光—检测—判决"链路,所有像素之间完全异步、互不阻塞。当某个像素感受到的光强变化超过阈值时,该像素就会立刻向输出总线申请发出一个事件;事件由 (x 坐标, y 坐标, 时间戳 t, 极性 ±) 四元组构成,是 DVS 唯一的输出形式。

DVS 事件数据格式(x, y, t, ±)示意图

DVS 的输出由 (x, y, t, ±) 四元组构成:坐标、时间戳与极性

像素电路结构

在像素电路层面,DVS 由两部分组成:感光单元(Pixel Unit)与亮度变化检测单元(Luminance Change Detection Unit)。光电二极管将入射光转换为电流,I/V 转换器再将电流转换为电压;随后差分调制电路计算当前电压与参考电压之间的差值,并将差值送入比较器电路;比较器同时设有正、负两个阈值,一旦差值超过任一阈值,便判定为一次事件并输出,随后参考电压会被重置为当前值,准备捕捉下一次变化。
DVS 像素电路:感光单元与亮度变化检测单元

事件触发流程

对单个像素来说,事件触发遵循「自适应基线 + 双向阈值」机制:系统初始化时设定参考电压与正、负阈值;当光强变化导致电压突破任一阈值时,像素立即输出对应极性的事件,随后参考电压重置为当前值,阈值随之滑动更新,准备捕捉下一次变化。

1
感光
光电二极管捕获入射光
2
转换
I/V 转换器电流→电压
3
比较
差分比较器超阈值触发
4
输出
事件 (x,y,t,±) 异步上报
DVS 事件触发的 6 步时序动画

对数响应与宽动态范围

这种"自适应基线 + 双向阈值"的机制,使 DVS 对亮度的相对变化率敏感而非绝对亮度。配合像素采用的对数响应曲线(输出电压随入射光强呈对数增长),DVS 在弱光下能分辨极细微的亮度差异,在强光下又不会饱和,从而获得超过 120dB 的等效动态范围——同一台相机可以在隧道出入口、强逆光、夜间车灯直射等极端场景下持续稳定工作。

正因为 DVS 只输出"正在变化"的像素,最终成像呈现出一种独特的"轮廓化"效果:静止的背景被自然过滤,运动物体的边缘被高时间分辨率的事件流清晰勾勒。在车载、机械振动、流体监测等场景中,这种成像形式天然契合"我们只关心运动"的应用需求。

像素输出电压随入射光强的对数响应曲线

DVS vs 传统相机

时间分辨率
33ms <1μs
动态范围
70dB >120dB
运行功耗
数百 mW <10mW
数据量
完整帧图像 仅变化像素
运动模糊
明显 几乎为零

帧式相机 vs DVS 输出对比

帧式相机与 DVS 在车载场景下的输出对比

同一车载场景下,左:传统帧式相机完整画面;右:DVS 仅保留运动物体的轮廓事件流

Examples

事件信号处理示例

DVS 在各种场景下的典型应用示例

液体监测

DVS 以微秒级时间分辨率逐颗捕捉液滴轮廓,喷射姿态清晰可见

喷涂 · 打印 · 灌装

人体追踪

DVS 仅响应运动产生的亮度变化,无论衣物颜色与背景如何,行人轮廓始终清晰且不输出冗余背景

安防 · 机器人导航

金属加工监测

DVS 凭借宽动态范围逐颗捕捉火花飞溅轨迹,且不输出静止机械部件等无关数据

刀具磨损监测

三维测量

DVS 仅捕捉激光扫过物体表面时的反射光变化,背景几乎无输出

在线测量 · 表面检测

振动监测

DVS 只对发生位移的边缘区域响应,振动模式被自然可视化

精密设备诊断

高速运动捕捉

DVS 以连续事件流记录运动轨迹,时间维度上无空缺

运动学 · 生物力学
Applications

应用领域

DVS 正在改变工业检测、机器人、监控和科学研究等领域

工业视觉检测

DVS 善于在运动中发现微小变化。当被检产品在产线上传送时,划痕、污渍、异物所引起的亮度差异会立刻被 DVS 捕捉为事件流。相比 RGB 相机依赖颜色对比、对光照敏感且数据量庞大,DVS 直接输出带坐标与时间的差分数据,体积小、速度快,并可与机器学习模型无缝结合,为自动化在线检测提供低带宽、高吞吐的视觉前端。

电子制造薄膜与卷材食品医药

机器异常检测

旋转机械、传送系统、机器人关节等部件的异常通常表现为微小的位移变化或振动模式偏移。DVS 能以微秒级延迟捕捉这些变化并保持极低数据量,使长期连续监测成为可能。结合机器学习对正常工况建模,可实时预警轴承磨损、皮带打滑、机械臂偏移等异常,支撑预测性维护。

电子制造重工业与基础设施

机器人避障与导航

自主移动机器人对响应速度与功耗高度敏感。DVS 将物体的运动直接转化为轮廓事件,让机器人可以在毫秒内感知障碍物位置变化,无需等待整帧图像。它特别适合配送机器人、AGV、无人配送车以及护理机器人,在弱光、强光突变与高速场景下均可稳定工作。

物流仓储服务机器人

隐私保护的智能监控

DVS 仅记录光强变化,不形成可识别的人脸、肤色或服饰细节,天然具备"隐私友好"属性。结合超宽动态范围,它可在医院走廊、养老机构、卫生间外、夜间通道等帧式相机难以胜任的环境下持续监控人员动态。与 RGB 或红外相机融合后,可在不牺牲隐私的前提下,构建更精细的安全分析系统。

安防医疗护理公共空间

科学测量与行为研究

科研场景常需观察高速、低对比、长时间的动态过程,DVS 能够仅在"事件发生时"产生数据,既保证时间精度又显著降低数据存储压力。在用户行为与人流研究中,由于 DVS 不获取可识别图像,调研可在保护被研究者隐私的前提下长期开展。

科研用户体验行为学

人机交互与手势识别

手势、眼动、面部表情等微动作的核心信息都集中在"变化"中。DVS 以像素级、微秒级捕捉这些变化,配合 ToF、RGB 相机可实现低延迟、低功耗的手势追踪与目光跟随,是 AR/VR 头显、可穿戴设备和智能座舱交互的理想视觉输入。

消费电子AR/VR智能座舱

深入了解 DVS 技术

获取详细的技术白皮书与产品规格,探索 DVS 在您的研究或项目中的应用潜力