利用可解释人工智能进行脑肿瘤检测和分类的视觉Transformer、集成模型以及迁移学习

由于脑肿瘤的高发病率和致命性,快速且准确地检测和分类脑肿瘤变得尤为重要。脑肿瘤包括恶性和非恶性两种类型,其异常生长会对大脑造成长期损害。磁共振成像(MRI)是一种常用的脑肿瘤检测方法。然而,依赖于专家手工分析 MRI 影像存在结果不一致的风险,同时仅仅识别肿瘤是不够的,快速确定肿瘤类型以尽早开始治疗同样重要。 为了提高肿瘤检测的速度、可靠性和公正性,本研究探索了多种深度学习(Deep Learning, DL)架构,包括 VGG16、InceptionV3、VGG19、ResNet50、InceptionResNetV2 和 Xception,并提出了基于最佳三种传递学习(Transfer Learning, TL)模型的新模型 IVX16。本文的多类分类模型旨在解决当前主要集中在二分类问题...

物理信息驱动深度学习用于肌肉骨骼建模:基于表面肌电图预测肌肉力量和关节运动

肌骨模型已经广泛用于生物力学分析,因为它们能够估计难以通过活体直接测量的运动变量(如肌肉力量和关节力矩)。传统的物理驱动计算肌骨模型可以解释神经驱动到肌肉、肌肉动力学、以及身体和关节运动学和动力学之间的动态交互。然而,这些模型由于其复杂性,运行速度较慢,难以实现实时应用。近年来,数据驱动方法以其实现速度快和操作简单的优点成为一种有前途的替代方案,但它们不能反映基础的神经机械过程。 本文提出了一种融合物理知识的深度学习框架,用以实现肌骨建模。在该框架中,将物理领域的知识引入数据驱动模型,作为软约束对其进行罚则/正则化处理。本文采用表面肌电图(SEMG)同步预测肌肉力量和关节运动学作为示例,使用卷积神经网络(CNN)实现该框架,并在两个数据集上进行了实验验证,展示了该框架的有效性和鲁棒性。 论文...

基于深度学习的实时视觉学习者识别模型

在如今的教育环境中,理解学生的学习风格对提高他们的学习效率至关重要。特别是视觉学习风格(visual learning style)的识别,有助于教师和学生在教学和学习过程中采取更有效的策略。目前,自动识别视觉学习风格主要依靠脑电图(Electroencephalogram, EEG)和机器学习技术。然而,这些技术通常需要离线处理来消除伪影和提取特征,从而限制了其在实时应用中的适用性。 这项由Soyiba Jawed、Ibrahima Faye和Aamir Saeed Malik在《IEEE Transactions on Neural Systems and Rehabilitation Engineering》上发表于2024年的研究,提出了一种基于深度学习技术的实时视觉学习者识别模型,...

基于Transformer的深度学习网络与时空信息结合的原始EEG分类方法

研究背景及目的 近年来,脑机接口(Brain-Computer Interface,BCI)系统在神经工程和神经科学领域广泛应用,而脑电图(Electroencephalogram,EEG)作为反映中枢神经系统不同神经元群体活动的数据工具,已经成为这些领域中核心的研究内容。然而,EEG信号具有低空间分辨率、高时间分辨率、低信噪比以及个体差异大等特征,这些都为信号处理和准确分类带来了极大的挑战。尤其在运动想象(Motor Imagery,MI)这一EEG-BCI系统常用范式中,准确分类不同MI任务的EEG信号对于BCI系统的功能恢复和康复具有重要意义。 传统的MI-EEG分类方法通常基于手工特征提取和分类,但这些方法可能在特征提取阶段丢失EEG的有用信息。近年来,深度学习模型因其自动特征提取和...

基于注意力机制深度学习的单通道脑电图睡眠分期分类方法

电子电气工程师学会 (IEEE)《神经系统与康复工程事务》2021年第29卷刊登了一篇题为《一种基于注意力深度学习的单通道EEG睡眠阶段分类方法》的文章。本文由Emadeldeen Edele、Zhenghua Chen、Chengyu Liu、Min Wu、Chee-Keong Kwoh、Xiaoli Li及Cuntai Guan等学者撰写。文章的主要目的是提出一种新型的基于注意力的深度学习模型,用于通过单通道的脑电图(EEG)信号进行自动睡眠阶段分类。 研究背景 睡眠是人类重要的生理过程,直接影响到每日生活的各个方面。有研究表明,高质量的睡眠能够促进身体健康和脑功能的提升,而睡眠中断则可能导致失眠或睡眠呼吸暂停等睡眠障碍。睡眠阶段(如浅睡和深睡)对免疫系统、记忆和代谢等起着关键作用,因此...