基于音频视觉Transformer的孤独症儿童多模态互动风格识别及其在FOS-R-III量表上的应用

一、背景介绍:自闭症儿童行为监测的临床困境与科技前景 自闭症谱系障碍(Autism Spectrum Disorder, ASD,自闭症)是一种伴随终生的神经发育性障碍。近年来,美国自闭症发病率快速攀升,根据现有流行病学数据,平均每36名儿童中就有一例自闭症患儿。自闭症主要表现为与他人的沟通和社会交往困难、兴趣和活动受限,以及重复刻板行为。上述核心症状直接影响患儿在家庭、学校和社会中的日常活动与社会功能。此外,与自闭症相关的“挑战性行为”(Challenging Behaviors, CBs),包括自伤、攻击和干扰性行为,具有重要的临床关注价值。这些行为不仅加剧了患儿的社交障碍,还带来了严重的健康风险,甚至危及自身或他人的安全。 目前,对于自闭症儿童的行为监测多依赖临床评估,由专业人员在医院...

面向程序感知的弱监督协作程序对齐框架研究

基于弱监督的协作式程序对齐框架:在指令视频相关性学习中的应用与评估 近年来,随着视频分析领域的快速发展,指令视频因其目标驱动的特性和与人类学习过程的内在关联,吸引了研究者越来越多的关注。相比于普通视频,指令视频包含多个细粒度的步骤,这些步骤具有不同的持续时间和时间位置,形成了更加复杂的程序结构。本研究提出了一种名为协作式程序对齐(Collaborative Procedure Alignment, CPA)的弱监督框架,用于在指令视频中进行程序感知的相关性学习。这一框架的核心特点在于无需依赖昂贵的步骤级标注,通过协作提取步骤信息并量化视频间的程序相关性,显著提升了指令视频相关性学习的效率和效果。 研究背景与问题提出 指令视频相关性学习(Video Correlation Learning, ...