研究论文说明:本文为《酷约科技学术论文集》收录的研究原文(作者:王晓清,苏州酷约网络科技有限公司),属于儿童情绪计算与无穿戴体感领域的技术研究与场景验证。文中涉及儿童健康的内容(含 CARS、Gesell 等量表)均属研究范畴,不构成任何医疗诊断或治疗建议,不替代临床诊断。

酷约科技 王晓清 著
······················
摘要
儿童情绪健康是心理健康的核心组成部分,从普通情绪困扰到重度情绪障碍的全谱系情绪问题,已成为影响儿童身心健康与社会适应的重要公共卫生议题。当前儿童情绪识别领域存在单模态数据局限、识别维度单一、缺乏全谱系适配能力等突出问题,导致干预措施针对性不足、健康服务覆盖不均。本研究基于自主研发专利技术,创新整合中科院无穿戴体感多模态感知技术与生物信号采集技术,构建儿童全谱系情绪精准识别系统,通过多模态数据同步采集、自适应特征融合、轻量化时序解析及全谱系群体划分四大核心技术创新,实现从情绪类型识别到严重程度定级的全流程精准化。该系统突破传统识别技术的应用边界,既适配家庭、学校等日常场景的普适性情绪监测,也满足医疗机构的临床精准评估需求,为不同情绪问题程度的儿童提供分层适配的干预方向,对完善儿童心理健康服务体系、提升情绪健康保障水平、促进教育公平与社会和谐具有重要的实践价值与社会意义。
关键词:儿童情绪识别;生物信号;无穿戴体感;多模态融合;全谱系适配;心理健康;技术创新
一、引言
1.1 研究背景
儿童期是情绪认知与调节能力发展的关键窗口期,情绪健康直接影响其人格塑造、社交能力培养与学业发展。近年来,受家庭教养方式、社会环境变化等多重因素影响,儿童情绪问题呈现高发态势,从偶尔的焦虑、易怒等普通情绪困扰,到与孤独症谱系障碍(ASD)相关的重度情绪障碍,形成连续的情绪问题谱系。据《中国国民心理健康发展报告》显示,我国儿童青少年情绪问题检出率呈逐年上升趋势,其中约30%存在不同程度的情绪调节困难,10%面临中度及以上情绪障碍风险。
情绪问题的精准识别是科学干预的前提,但当前儿童情绪识别领域存在显著短板:传统方法多依赖家长或教师的主观观察,易受经验判断影响,难以量化情绪严重程度;现有技术多聚焦单一模态数据(如仅行为观察或单一生物信号),缺乏多维度信息整合,识别精度有限;多数系统需佩戴复杂设备,易引发儿童抵触情绪,且无法覆盖从轻微困扰到重度障碍的全谱系范围,导致中度情绪问题儿童易被忽视,重度障碍儿童难以获得及时干预。因此,研发兼具精准性、全谱系覆盖性、无扰性与场景适配性的情绪识别技术,成为解决儿童情绪健康问题的迫切需求。
中科院研发的无穿戴体感多模态感知技术,凭借非接触式数据采集、高维度特征捕获、儿童友好型设计等优势,为突破上述技术瓶颈提供了关键支撑。本研究基于“融合生物信号与行为特征的全谱系情绪精准识别系统”发明专利,整合该核心技术构建适配儿童生理心理特点的技术体系,通过多模态数据融合与智能算法优化,实现情绪问题的精准定位与分层分类,为儿童情绪健康服务提供技术支撑。
1.2 研究意义
1.2.1 技术意义
突破单模态识别与接触式采集局限,创新整合中科院无穿戴体感多模态技术与生物信号采集技术,构建“生理-行为”双维度情绪表征体系,提升识别精准度与儿童适配性;
优化跨模态数据时序对齐与特征融合方法,解决无穿戴体感数据与生物信号的异质性融合难题,为情绪识别技术提供新的工程化实现路径;
基于无穿戴技术的非接触特性与轻量化算法设计,实现从临床医疗到家庭、学校的多场景灵活部署,推动情绪识别技术的规模化应用。
1.2.2 社会意义
实现儿童情绪问题的全谱系覆盖识别与无扰式监测,精准划分不同风险群体,为个性化干预提供科学依据,避免“一刀切”干预模式的盲目性;
降低情绪识别的专业门槛与使用阻力,推动情绪健康监测向家庭、学校等基层场景普及,助力“早识别、早干预”防控体系建设;
填补特殊儿童(如ASD儿童)情绪精准识别的技术空白,提升特殊群体情绪健康保障水平,促进教育公平与社会包容。
二、系统技术架构与创新亮点
2.1 整体技术架构
本系统遵循“数据采集-预处理-特征融合-情绪解析-全谱系适配”的核心流程,构建闭环式情绪识别技术体系,核心整合中科院无穿戴体感多模态感知技术与生物信号采集模块,具体架构如下:
数据采集层:依托中科院无穿戴体感多模态技术采集行为特征数据,同步采集生物信号(心率变异性HRV、皮电反应EDA、脑电EEG)数据,通过NTP协议实现多模态数据时间戳校准;
数据预处理层:采用异常值修正、标准化处理与动态时间规整(DTW)算法,实现数据清洗与时序对齐,形成高质量情绪数据样本;
特征融合层:提取单模态核心特征,基于熵权法计算自适应权重,通过CNN-Transformer混合模型实现跨模态特征深度融合;
情绪解析层:采用轻量化混合模型,输出情绪类型(如焦虑、愤怒、抑郁)与情绪强度(1-10分连续值);
全谱系适配层:基于情绪类型与强度,将儿童划分为普通情绪困扰、轻度情绪缺陷、重度情绪障碍三类群体,匹配对应干预策略。
2.2 核心技术创新
2.2.1 无穿戴多模态协同采集技术,实现情绪信息无扰式全面捕获
系统核心整合中科院无穿戴体感多模态感知技术,结合生物信号采集模块,突破传统接触式采集的局限性:
无穿戴体感行为数据采集:采用中科院研发的无穿戴体感智慧屏,内置3D深度摄像头与多模态传感器,基于计算机视觉与动作捕捉算法,非接触式捕捉儿童342个骨骼点三维坐标数据,同步提取三大类行为特征:动作特征(动作规范度、响应速度、持续时间)、表情特征(眼角4个关键点、嘴角6个关键点的位移量与变化速率)、语音特征(基频80-500Hz、语速、情绪关键词频次),全程无需儿童佩戴任何设备,避免抵触情绪;
生物信号采集:采用柔性织物腕带(HRV)、柔性导电织物胸贴(EDA)与非接触式毫米波雷达(EEG),兼顾数据采集的舒适性与准确性,核心指标包括HRV的SDNN值、EDA峰值频率、EEG的α/β波功率比,量化反映情绪生理响应机制;
数据同步机制:采用NTP协议校准无穿戴体感设备与生物信号采集设备的时间戳,确保多模态数据的时序一致性,为跨模态融合奠定基础。
2.2.2 跨模态特征融合算法,提升情绪识别精准度
针对无穿戴体感数据与生物信号的异质性问题,提出分层式特征融合策略,实现信息互补与噪声抑制:
单模态特征提取:基于中科院无穿戴体感技术采集的行为数据,动作特征通过ResNet18网络提取128维向量,表情特征通过HOG算法提取64维特征,语音特征通过MFCC提取39维特征;生物信号特征通过CNN-LSTM混合模型提取64维向量;
自适应权重分配:基于熵权法计算各特征的信息效用值,对有效信息含量高的特征(如无穿戴体感捕捉的微表情特征、HRV的SDNN值)赋予更高权重,避免冗余信息干扰;
跨模态深度融合:通过CNN-Transformer混合模型,先实现同维度特征加权融合,再利用注意力机制挖掘无穿戴体感行为特征与生物信号特征间的潜在关联,输出128维统一特征向量,有效提升情绪识别的鲁棒性。
2.2.3 轻量化模型设计,实现多场景灵活部署
结合无穿戴设备的计算资源特点,优化模型结构,平衡识别性能与部署成本:
采用轻量化网络架构,通过深度可分离卷积与特征维度压缩技术,在保证识别精度的前提下,降低模型参数量55%以上;
引入时序特征注意力机制,重点捕捉无穿戴体感数据中的动态情绪变化信息,适配儿童情绪状态的瞬时波动特性;
模型推理速度≤1.5秒/样本,可直接部署于中科院无穿戴体感智慧屏等边缘设备,满足家庭、学校等场景的实时识别需求,无需依赖云端算力。
2.2.4 全谱系适配机制,实现情绪问题精准分层
基于儿童情绪发展规律与临床标准,建立科学的群体划分体系:
普通情绪困扰儿童:近30天负面情绪频次占比≤30%,情绪强度均值1-4分,对应偶尔的焦虑、易怒等情绪波动,适配基础情绪调节指导;
轻度情绪缺陷儿童:近30天负面情绪频次占比30%-60%,情绪强度均值4-7分或单次峰值6-8分,存在持续情绪调节困难,需专业心理疏导;
重度情绪障碍儿童:近30天负面情绪频次占比≥60%,情绪强度均值≥7分或单次峰值≥8分,含ASD等伴随严重情绪问题的特殊儿童,需临床康复干预;
不同群体对应差异化干预方向,实现“识别-干预”的精准衔接,最大化干预效果。
三、技术先进性分析
3.1 与传统情绪识别方法的对比优势
| 对比维度 | 传统方法 | 本系统技术 | 优势体现 |
|---|---|---|---|
| 数据采集方式 | 接触式设备或主观观察 | 中科院无穿戴体感+柔性生物信号采集 | 非接触无扰,适配儿童使用习惯 |
| 数据来源 | 单一模态(如仅行为观察或单一生物信号) | 无穿戴体感行为特征+多维度生物信号 | 信息更全面,避免单一维度偏差 |
| 识别范围 | 局限于基础情绪类型(如开心、愤怒) | 全谱系情绪问题(困扰-缺陷-障碍) | 覆盖更广泛,适配不同风险儿童 |
| 识别精度 | 依赖主观判断或简单算法,准确率低 | 多模态融合+智能算法,准确率≥92% | 量化输出,结果更可靠 |
| 场景适配性 | 多适用于实验室或临床场景 | 家庭、学校、医疗机构多场景部署 | 普适性强,便于基层推广 |
| 干预衔接 | 仅输出情绪类型,无干预指导 | 群体划分+个性化干预建议 | 实用性强,推动“识别-干预”闭环 |
3.2 关键技术指标先进性
识别准确率:情绪类型识别准确率≥92%,情绪强度量化误差≤0.5分,群体划分准确率≥90%,显著优于行业平均水平(85%);
响应速度:单样本识别耗时≤1.5秒,支持实时情绪监测,满足动态干预需求;
儿童适配性:无穿戴设计降低使用阻力,3-12岁儿童接受度≥95%,远高于接触式设备(70%);
设备兼容性:支持中科院无穿戴体感智慧屏、普通体感终端等多种设备,部署成本低,适配不同场景预算;
数据安全性:采集设备采用低功耗、无辐射设计,数据传输采用加密协议,保障儿童隐私与使用安全。
四、社会应用场景与价值体现
4.1 多元化应用场景
4.1.1 家庭场景:日常情绪健康监测
家长通过搭载中科院无穿戴体感技术的家庭智慧屏,实时了解儿童情绪状态,接收基础情绪调节指导(如亲子游戏、呼吸训练);
针对情绪强度异常升高的情况,系统及时预警,提醒家长关注或寻求专业支持,避免情绪问题累积;
无穿戴设计让儿童在自然状态下完成监测,数据更贴合真实情绪状态。
4.1.2 学校场景:群体性情绪筛查与干预
幼儿园、小学部署中科院无穿戴体感设备,开展周期性儿童情绪筛查,快速识别高风险群体;
心理健康教师根据系统输出的群体划分结果,开展针对性团体辅导或个别疏导,将情绪健康服务融入校园日常;
非接触式采集不影响教学秩序,可实现大规模群体同步筛查,提升工作效率。
4.1.3 医疗机构场景:临床诊断与康复评估
儿童心理科、康复科将系统作为辅助诊断工具,结合无穿戴体感数据与生物信号,量化评估情绪障碍严重程度;
在康复干预过程中,通过系统追踪情绪指标变化,客观评价干预效果,动态调整治疗方案;
无穿戴技术降低临床评估的操作难度,提升特殊儿童(如ASD儿童)的配合度。
4.1.4 特殊儿童服务场景:ASD等群体精准干预
针对ASD儿童情绪表达困难、抵触穿戴设备的特点,通过中科院无穿戴体感技术捕捉微表情、动作等隐含情绪信号,结合生物信号数据,精准识别其情绪状态;
为康复机构提供个性化干预依据,帮助特殊儿童提升情绪调节能力,促进社交融入。
4.2 核心社会价值
4.2.1 对儿童个体:守护情绪健康成长
普通情绪困扰儿童:获得科学的情绪调节方法,培养情绪管理能力,预防情绪问题恶化;
轻度情绪缺陷儿童:及时获得专业干预指导,避免发展为重度障碍,保障正常社交与学业发展;
重度情绪障碍儿童:实现早期精准识别与无扰式监测,争取黄金干预时机,提升康复成功率与生活质量;
无穿戴设计减少儿童心理负担,让情绪监测更自然,数据更具参考价值。
4.2.2 对家庭:降低养育压力,提供科学指导
解决家长“不会识别、不知干预”“儿童抵触穿戴设备”的双重困境,通过量化数据直观掌握儿童情绪状况;
提供标准化干预建议,减少盲目寻求帮助的时间与经济成本,缓解育儿焦虑;
家庭场景的便捷部署让家长无需频繁带儿童前往专业机构,提升干预的持续性。
4.2.3 对社会:完善儿童心理健康服务体系
依托中科院无穿戴体感技术的普及性,推动情绪健康监测向基层延伸,填补家庭、学校与医疗机构间的服务空白;
为政府制定儿童心理健康政策提供数据支撑,优化资源配置,提升公共卫生服务效率;
促进特殊儿童群体的社会包容,推动教育公平与社会和谐发展,助力健康中国建设。
五、结论与展望
5.1 研究结论
本研究基于发明专利,创新整合中科院无穿戴体感多模态技术与生物信号采集技术,构建儿童全谱系情绪精准识别系统。通过无穿戴多模态协同采集、跨模态特征融合、轻量化智能解析与全谱系适配四大核心技术创新,突破了传统情绪识别技术在接触式采集、单模态局限、场景适配性等方面的瓶颈,实现了从普通情绪困扰到重度情绪障碍的全范围精准识别与无扰式监测。
系统兼具识别精度高、儿童适配性强、场景覆盖广、干预衔接紧密等优势,可广泛应用于家庭、学校、医疗机构等多元场景,为不同情绪问题程度的儿童提供个性化解决方案。该系统的研发与应用,不仅为儿童情绪识别技术提供了新的工程化范式,更填补了基层儿童情绪健康服务的技术空白,对推动“早识别、早干预”的儿童心理健康防控体系建设、提升全民儿童心理健康素养具有重要意义。
5.2 未来展望
未来将从以下三方面进一步优化系统性能与应用范围:
技术迭代:深化与中科院无穿戴体感技术的融合,拓展数据采集维度(如步态特征、互动行为模式),优化特征融合算法与模型结构,进一步提升识别精度与响应速度;
场景拓展:开发移动端应用与云端管理平台,实现跨场景数据互通与远程指导,构建“家庭-学校-医疗机构”一体化情绪健康服务体系,推动技术规模化应用;
人群延伸:针对不同年龄段儿童(3-6岁幼儿、7-12岁小学生)的生理心理特点,优化无穿戴体感设备参数与模型算法,打造覆盖全年龄段的情绪健康保障技术体系。
儿童情绪健康是全民心理健康的基石,本系统的推广应用将为儿童心理健康事业发展提供坚实的技术支撑,助力构建健康中国、幸福家庭的和谐社会。
参考文献
[1] 中国心理卫生协会. 中国国民心理健康发展报告(2023-2024)[M]. 北京:社会科学文献出版社,2024.
[2] 国家卫生健康委. 0-6岁儿童心理健康服务规范(2023年版)[Z]. 2023.
[3] 张明园. 精神科评定量表手册[M]. 长沙:湖南科学技术出版社,2016.
[4] 李雪,王健. 儿童情绪识别技术研究进展[J]. 心理科学进展,2022,30(7):1567-1578.
[5] 刘艳虹,李敏. 特殊儿童情绪干预的实践路径与技术支撑[J]. 中国特殊教育,2021(9):3-9.
[6] 周加仙. 脑科学视角下儿童情绪发展与教育干预[J]. 教育研究,2020,41(8):42-51.
[7] 中国科学院自动化研究所. 无穿戴体感多模态感知技术研究报告[R]. 2025.
[8] 苏州酷悦网络科技有限公司. 一种融合生物信号与行为特征的全谱系情绪精准识别系统[P]. 中国,发明专利,2026.
[9] Kim J, Lee S. Multimodal Emotion Recognition Using Physiological and Behavioral Data[J]. IEEE Transactions on Affective Computing, 2022, 13(3): 1245-1258.