分享自:

基于光纤散斑图传感器的手势识别研究

期刊:Optics ExpressDOI:10.1364/oe.546834

这篇文档属于类型a,即报告了一项原创研究。以下是针对该研究的学术报告:

作者与机构
本研究由Xinxin Wang、Tianhuan Li、Yi Zheng、Meidi Xu、Yuyu Hu、Hang Zhang和Jinhua Yan共同完成,他们均来自浙江工业大学物理学院。研究于2025年3月10日发表在期刊《Optics Express》第33卷第5期上。

学术背景
本研究的主要科学领域是光学传感与人机交互。手势识别在提升人机交互的自然性、直观性和效率方面具有重要潜力。现有的手势识别技术主要依赖于图像识别与深度学习结合,或通过深度相机获取手势的三维结构信息。然而,这些视觉系统存在高计算需求和光照条件依赖等限制。相比之下,可穿戴系统利用压电、压阻、摩擦电等物理效应将手势的机械动作转换为电信号,但这些系统也存在电极放置敏感和信号噪声等问题。本研究提出了一种基于单模-多模-多芯光纤(single mode-multimode-multicore optical fiber, SMF-MMF-MCF)结构的手势识别系统,旨在通过分析光纤散斑图(specklegram)实现高效、准确的手势识别,并降低硬件需求和复杂性。

研究流程
研究分为以下几个步骤:
1. 系统设计与实验准备
- 研究团队设计了一种基于SMF-MMF-MCF结构的光纤传感头,并将其嵌入柔性硅胶薄膜中,作为手势传感器。
- 光纤传感头由单模光纤(SMF)、多模光纤(MMF)和多芯光纤(MCF)通过熔接技术连接而成。MMF长度约为6厘米,以确保覆盖手腕表面并保持紧凑设计。
- 实验使用980纳米波长的激光作为光源,通过SMF输入光,最终由MCF输出光并由相机捕获散斑图。

  1. 手势数据采集

    • 实验测试了24种手势,包括数字0-9和14个英文字母。
    • 每种手势采集600张散斑图,共14400张图像。图像按3:1的比例分为训练集(10800张)和测试集(3600张)。
    • 图像预处理包括裁剪、中值滤波和下采样,最终生成224×224像素的图像用于训练。
  2. 深度学习模型训练

    • 研究团队开发了一种简化的6层残差网络(simplified 6-layer ResNet, SRESNet6),用于训练和识别散斑图。
    • SRESNet6包括5个卷积层和1个全连接层,通过残差连接解决深度网络的学习退化问题。
    • 训练过程中,使用交叉熵损失函数(cross-entropy loss function)衡量预测概率分布与真实概率分布的差异。
  3. 实验结果与分析

    • SRESNet6在训练集和测试集上的损失值和准确率在约15个训练周期后开始收敛,20个周期后稳定,测试集准确率超过98%。
    • 与其他卷积神经网络(如AlexNet、VGG、ResNet18和ResNet34)相比,SRESNet6在保持高准确率的同时显著降低了计算复杂性和训练时间。
    • 通过t-SNE(t-distributed stochastic neighbor embedding)数据可视化算法,研究发现不同手势的散斑图特征能够被有效区分。
  4. 多用户验证与对比实验

    • 为了验证系统的普适性,研究团队采集了5名参与者的手势数据,并使用SRESNet6进行训练。结果显示,多用户训练集的准确率达到97.2%,表明模型具有良好的泛化能力。
    • 与未使用MCF的传感器相比,SMF-MMF-MCF结构的传感器显著提高了手势识别的准确率和稳定性。

主要结果
1. SRESNet6在测试集上的准确率超过98%,表明该系统能够高效识别24种手势。
2. 与AlexNet、VGG、ResNet18和ResNet34相比,SRESNet6在保持高准确率的同时显著降低了计算复杂性和训练时间。
3. 多用户验证结果显示,系统具有良好的泛化能力,适用于不同用户的手势识别。
4. 对比实验表明,SMF-MMF-MCF结构的传感器在手势识别准确率和稳定性方面显著优于未使用MCF的传感器。

结论
本研究提出了一种基于SMF-MMF-MCF结构的手势识别系统,通过分析光纤散斑图实现了高效、准确的手势识别。该系统具有硬件需求低、设计紧凑、易于集成到可穿戴设备中等优点,为人机交互领域提供了新的解决方案。研究结果表明,该系统在手势识别准确率和稳定性方面具有显著优势,展现了其在实践应用中的巨大潜力。

研究亮点
1. 提出了一种基于SMF-MMF-MCF结构的新型光纤传感系统,实现了高效、准确的手势识别。
2. 开发了简化的6层残差网络(SRESNet6),在保持高准确率的同时显著降低了计算复杂性和训练时间。
3. 通过多用户验证和对比实验,证明了系统具有良好的泛化能力和稳定性。
4. 该研究为手势识别技术提供了一种低硬件需求、高稳定性的新方法,具有重要的科学和应用价值。

其他有价值的内容
研究团队还探讨了光纤散斑图在手势识别中的特征提取机制,揭示了MCF在空间采样和特征放大中的作用,为未来相关研究提供了理论依据和技术参考。

上述解读依据用户上传的学术文献,如有不准确或可能侵权之处请联系本站站长:admin@fmread.com