感知技术 · 非接触感知技术

非接触式光感知是什么?能获取哪些生理与状态信息?

从光学采集到生理指标,再到压力、健康风险与情绪分析;rPPG是其中提取脉搏信息的技术路径。

非接触式光感知通过连续图像记录皮肤反射光等可用信息,再由相应算法计算或估计生理指标。科思创动围绕这一能力开展心率、血氧、呼吸、HRV、血压,以及血糖风险、长期压力、心血管风险和情绪变化的分析。rPPG负责提取脉搏相关信息;风险评估与情绪分析还需要各自的模型、时间记录或其他输入。具体产品的输出与适用条件见对应版本资料。

本文目录 · 10 个问题

先看整体:光学采集、生理指标与状态分析

光是采集信息的媒介。血液容积、血红蛋白吸收以及呼吸相关变化,会以不同方式影响可观察的光学信号。摄像头记录这些变化后,算法先检查时间信息和信号质量,再按任务提取特征、计算或估计结果。

rPPG(远程光电容积描记)主要处理与血液容积脉动有关的光学变化,是非接触式光感知中的重要路径。能恢复脉搏节律,并不表示已经具备所有生理指标或健康风险的估计方法。血氧需要相应光谱信息,血压需要专门的估计模型,压力与风险则属于进一步的分析。

情绪分析还可以结合表情、姿态、语音和语境。同一段视频中的皮肤反射光与面部动作是不同的信息;语音来自麦克风。实际启用哪些输入,由产品模块和项目配置决定。

非接触式光感知与状态分析的关系概念流程,说明各类任务怎样使用信息;不代表某一产品的内部算法结构。
  1. 连续光学采集
  2. 有效区域、时间戳与质量检查
  3. 按任务提取信号与特征
  • 脉搏相关信息

    rPPG提取脉搏波与节律,为心率、逐搏间期等任务提供信息。

  • 其他生理指标

    血氧、呼吸、血压使用各自所需的通道、特征与模型,分别验证。

  • 压力与健康风险

    结合可用生理特征、个体信息或多次记录,进行定义明确的状态与风险评估。

  • 多模情绪分析

    除可用生理特征外,还接入实际启用的表情、姿态、麦克风音频、语义或语境;按时间和质量融合。

应用获取相应结果及有效性状态,再决定展示、复测或后续服务。

心率之外,血氧、呼吸和血压怎样获得?

不同指标使用的信息并不相同。心率关注周期和频率;变异性关注每次脉搏出现的时间;血氧关注氧合与脱氧血红蛋白的光谱吸收差异;血压则通过相关特征和模型估计。下面按通用方法说明,具体实现以所选产品资料为准。

例如,RGB相机血氧研究会使用多通道信息、信号变换和标定关系,不能仅凭一条测心率的波形就得到血氧。这里引用的YCgCr研究有自己的相机、光照和参考血氧仪设置,不是科思创动的内部实现说明。普通RGB与指定近红外方案也不能直接互换。

血压估计要分别说明收缩压与舒张压、模型所需输入、是否需要个体校准,以及用什么参考方法验证。摄像头记录的是光学信息,血压值由模型估计。呼吸相关分析可使用光学波形的呼吸调制或可用运动线索,也需要说明实际输入和适用条件。

小屏阅读:表格可在框内左右滑动。

生理指标使用的信息与验证方法
指标需要的信息与估计方式主要条件对照应看什么
心率/脉率脉搏周期或频率,换算为每分钟次数连续有效信号;运动与光照干扰得到处理同步ECG或适当的参考脉搏设备;明确时间窗
HRV相关指标/PRV定位逐搏间期,处理伪差后按分析窗计算变异性足够的时间戳与逐搏精度;平均心率准确还不够分别核对ECG R-R间期或接触PPG脉搏间期;不能混称
血氧利用不同通道/波长的吸收差异,经过对应模型与标定通道、照明、成像链路与标定范围符合方案要求说明参考血氧方法及覆盖范围,不能只报正常窄范围
呼吸分析呼吸相关光学调制或可用胸腹/面部运动线索有效观察窗口、运动处理与实际采集区域同步的呼吸参考与相同计数时间窗
血压将脉搏相关特征或其他规定输入送入专门的估计模型按方案准备个体信息与校准;检查跨人群适用性配对的收缩压/舒张压参考及取值范围;说明训练/测试的受试者划分;如需个体校准,区分校准记录与测试记录

依据与范围:Pulse Rate Variability Analysis Using Remote Photoplethysmography Signals;Non-Contact Oxygen Saturation Measurement Using YCgCr Color Space with an RGB Camera;Assessment of Non-Invasive Blood Pressure Prediction from PPG and rPPG Signals Using Deep Learning。

怎样进一步分析血糖风险、心血管风险、长期压力与情绪?

这些模型使用可用生理特征、个体信息或历史记录,评估特定的状态或风险。要先说明评估的对象和时间范围,再选用对应模型。血糖风险关注、心血管风险关注与长期压力分析,需要分别解释。

血糖风险关注要区分风险参考与血糖浓度数值,并说明模型需要哪些输入、参考的是什么人群、结果怎样复测。心血管风险也要明确关注的是节律线索、血压相关变化还是其他定义好的事件。风险提示可帮助安排后续关注,不能直接写成疾病诊断。

长期压力与恢复变化需要可比较的多次记录、个人参考及相关生活信息。单次心率变化可能同时受到活动、情绪和采集条件影响,不能凭一个数值判断长期压力或笼统的“亚健康”。情绪变化则应结合任务语境与实际启用的模态解释。

这些任务在项目中应按所需模块选择。实际输出、输入条件与适用范围见对应版本资料,项目可以据此选择需要的能力组合。

小屏阅读:表格可在框内左右滑动。

从生理信息到状态与风险,项目需要明确什么
任务结果要说明什么还需要准备什么
血糖风险关注输出是何种风险或参考线索,与血糖浓度值怎样区分对应模块资料、适用人群、输入条件与复测方法
心血管风险关注具体关注的节律、血压相关变化或目标事件有效记录、对应参考方法及模型适用范围
长期压力与恢复比较的时间范围、个人参考与趋势含义可比较的多次记录、活动/休息信息及任务标签
情绪变化结果属于项目定义的类别、维度还是分数实际启用的生理、表情、声音或语境输入;同步与质量状态

依据与范围:Remote photoplethysmography for health assessment: a review informed by IntelliProve technology。

rPPG:怎样从接触式PPG发展到视频脉搏感知?

接触式光学传感器会向组织发光,再记录经过组织作用后的光信号。血液随心搏产生的变化,可以使接收到的光出现微小起伏。rPPG则尝试从一段皮肤视频里取得相关线索,不必把传感器夹在手指上。早期研究已用普通视频摄像头提取脉搏信号。[1]

用户可以在不佩戴传感器的情况下采集脉搏信息。相机仍需保留皮肤反射光的连续变化;采集条件或视频处理不合适时,算法可能得不到可用信号。

脉搏为什么会影响皮肤反射光?

照到皮肤的光,一部分在表面反射,另一部分进入组织,经过吸收和散射后返回摄像头。血液和周围组织共同参与这个过程;随脉搏出现的血容量等变化,会调制返回光中的一部分。[2]

算法在连续图像中寻找与脉搏有关的微小变化。光照、头部运动和相机处理也会改变像素,提取信号时需要把这些影响与脉搏变化区分开。

图示可在框内左右滑动查看。

图 1 · 摄像头观察的是皮肤反射光的微小变化 示意皮肤反射光怎样随脉搏变化;组织尺度和光路经过简化,摄像头记录的是反射光变化。
图 1 · 摄像头观察的是皮肤反射光的微小变化示意皮肤反射光怎样随脉搏变化;组织尺度和光路经过简化,摄像头记录的是反射光变化。

rPPG子路径:从视频到脉搏结果,中间怎样处理?

首先找到合适的皮肤区域。ROI是“感兴趣区域”的缩写,指参与计算的图像部分,例如额头或脸颊。人脸检测只是定位,区域内是否有眼镜反光、头发或明显遮挡,还需要另行处理。

接下来,将连续图像转换成随时间变化的记录。例如,分别统计红、绿、蓝通道的像素变化,便得到几条时间曲线。它们混合了脉搏和干扰,算法再尝试从中分离有用成分。CHROM和POS是两种经典思路,分别利用色度组合和与皮肤色调相关的投影关系;它们不是简单地“永远选绿色通道”。[3][2]

最后,从候选信号中分析节律,并判断这段信息是否适合输出。比如每秒约1.2次的重复节奏,对应每分钟约72次;这只是频率单位换算,不是产品实测值。

图示可在框内左右滑动查看。

图 2 · 从连续视频到脉搏相关信息 流程和曲线均为教学示意。心率、逐搏间期、呼吸及状态推断是不同任务。
图 2 · 从连续视频到脉搏相关信息流程和曲线均为教学示意。心率、逐搏间期、呼吸及状态推断是不同任务。

为什么一定要连续观察,而不是拍一张照片?

节律描述的是随时间重复的速度。单张照片没有这段变化过程,不能直接提供脉搏周期。每次计算使用的连续片段,通常称为时间窗口。

这里有一个自然取舍:片段太短,观察到的周期少;片段更长,又可能混入较早的状态。界面每秒更新,不代表只使用一秒数据。相邻结果还可能共用很多画面,不能把刷新次数理解成独立测量次数。

脉率、心率、HRV和PRV分别表示什么?

小屏阅读:表格可在框内左右滑动。

脉率、心率、HRV和PRV分别表示什么?
名称主要描述什么需要注意什么
脉率外周脉搏的重复频率与心率相关,但目标和取得方式不同
心率心脏搏动频率不能将所有视频输出都当作心电记录
HRV心搏间隔的变异特征需要逐搏时间信息,不是平均频率的另一种名称
PRV脉搏间隔的变异特征与HRV有关,但并非所有条件下可互换

平均频率看起来稳定,并不证明逐搏间隔和波形细节也准确。关于HRV与PRV的研究,专门讨论了两者之间的差异与条件。[4][5] 血压、血氧和疾病诊断还需要各自的方法与验证,不能仅凭提取出脉搏信号就判断这些任务也能完成。

非接触式光感知怎样进入日常产品?

在主动参与的健康互动中,它可以减少额外穿戴;在座舱或机器人中,它可以作为行为和交互信息之外的一条输入。是否显示生理数字、用于状态分析,或仅提供某种服务提示,应由具体应用决定。

产品需要检查视频质量,计算和解释对应指标,再确定结果在场景中如何使用。普通摄像头与专用模组也各有价值,详见《普通RGB摄像头能用于生理感知吗?何时需要专用模组?》。

信号不足时,应用怎样处理?

摄像头记录的时间变化可以用于脉搏分析。扩展到其他生理指标或状态推断时,需要说明所用信号、计算方法和验证条件。

信号质量不足时,可以暂缓输出生理结果,让应用继续正常交互,等待下一段可用的视频。

参考资料与延伸阅读

  1. 论文Poh M-Z; McDuff D J; Picard R W. Non-contact, automated cardiac pulse measurements using video imaging and blind source separation.

    Optics Express 18(10):10762–10774, 2010. DOI: 10.1364/OE.18.010762

    引用范围:视频脉搏感知的研究路径;不代表任意摄像头的产品性能。

  2. 论文Wang W; den Brinker A C; Stuijk S; de Haan G. Algorithmic Principles of Remote PPG.

    IEEE Transactions on Biomedical Engineering 64(7):1479–1491, 2017. DOI: 10.1109/TBME.2016.2609282

    引用范围:皮肤光学模型及远程PPG的算法原理。

  3. 论文de Haan G; Jeanne V. Robust Pulse Rate From Chrominance-Based rPPG.

    IEEE Transactions on Biomedical Engineering 60(10):2878–2886, 2013. DOI: 10.1109/TBME.2013.2266196

    引用范围:色度法的颜色通道组合与脉搏提取原理。

  4. 学术定义/历史标准Task Force of the European Society of Cardiology and the North American Society of Pacing and Electrophysiology. Heart rate variability: standards of measurement, physiological interpretation and clinical use.

    Circulation 93:1043–1065, 1996. PMID: 8598068

    引用范围:HRV的定义、测量方法与间期含义。

  5. 学术综述Schäfer A; Vagedes J. How accurate is pulse rate variability as an estimate of heart rate variability? A review on studies comparing photoplethysmographic technology with an electrocardiogram.

    International Journal of Cardiology 166(1):15–29, 2013. DOI: 10.1016/j.ijcard.2012.03.119

    引用范围:脉率变异性与心率变异性并非在所有条件下等同。

  6. 论文Pulse Rate Variability Analysis Using Remote Photoplethysmography Signals

    Sensors, 2021. DOI: 10.3390/s21186241

    引用范围:逐搏间期、伪差处理与PRV分析;研究对照为接触PPG,不能等同ECG HRV验证。

  7. 论文Non-Contact Oxygen Saturation Measurement Using YCgCr Color Space with an RGB Camera

    Sensors, 2021. DOI: 10.3390/s21186120

    引用范围:RGB多通道、模型与标定的研究实例;不代表公司采用同一实现或具有相同性能。

  8. 论文Assessment of Non-Invasive Blood Pressure Prediction from PPG and rPPG Signals Using Deep Learning

    Sensors, 2021. DOI: 10.3390/s21186022

    引用范围:PPG与rPPG的血压估计及验证条件;不将外部算法或结果归为公司产品。

  9. 论文Remote photoplethysmography for health assessment: a review informed by IntelliProve technology

    Frontiers in Digital Health, 2026. DOI: 10.3389/fdgth.2025.1667423

    引用范围:生理指标与进一步健康状态分析的层次、压力分析的相关输入;不证明公司血糖风险或心血管风险模型。作者与IntelliProve有关联。

项目合作

项目咨询

直接联系我们。

科思创动专注于人体状态感知技术,为康养、组织健康、健康座舱、生产安全以及专业谈话与监管提供人体状态智能引擎 SDK 和软硬一体产品。

电话:0755-23732105
微信咨询二维码
微信咨询点击打开,或微信扫码
关注公众号二维码
关注公众号点击打开,或微信扫码