分享自:

自动化电子显微镜中样品台运动的评估

期刊:Microscopy and MicroanalysisDOI:10.1093/micmic/ozad108

自动化电子显微镜中样品台运动的评估:迈向自主实验的关键一步

作者与发表信息 本研究由 Kevin R. Fiedler(华盛顿州立大学三城分校)、Matthew J. Olszta、Kayla H. Yano、Christina Doty、Derek Hopkins、Sarah Akers 以及通讯作者 Steven R. Spurgeon*(华盛顿大学)共同完成,他们主要来自太平洋西北国家实验室。该研究于2023年10月13日在线发表在期刊 Microscopy and Microanalysis 上(2023年第29卷第6期,1931-1939页)。

学术背景 本研究属于电子显微学与仪器自动化交叉领域。随着人工智能(AI)、机器学习(ML)和计算机视觉技术的兴起,“自动驾驶”或自主操作透射电子显微镜(TEM)成为材料、化学和生物系统表征的重要发展方向。然而,实现TEM的完全自主操作面临一个核心挑战:样品台运动的精确控制。TEM样品台的运动因机械不稳定性、滞后效应和热漂移等问题而难以实现大规模、高精度的自动化,这严重阻碍了需要可重复、精确移动的AI驱动显微镜设计。尽管扫描电子显微镜(SEM)的样品台校准已有较多研究,但针对更复杂的TEM样品台运动性能的系统评估却鲜有报道。因此,本研究旨在填补这一空白,提供一个通用框架来评估任何TEM样品台的运动精度和准确性,识别当前硬件在实现全自动化实验方面的限制,并为未来仪器设计提供指导。

详细研究流程 本研究是一个方法论与实证分析相结合的工作,其流程主要包括理论框架构建、自动化硬件测试、数据采集与分析三个核心部分,并使用了自主研发的自动化控制平台。

1. 理论框架构建 首先,作者为评估TEM样品台运动定义了一个清晰的数学与概念框架。他们提出了三个关键位置术语: * 目标位置: 用户希望样品台移动到的位置(输入指令)。 * 报告位置: 显微镜在执行移动命令后反馈的位置(显示值或“程序”值)。 * 实际位置: 样品在空间中的真实位置,通过图像处理技术(如交叉相关分析)测量相邻图像间的相对位移来确定。

基于这三个位置的一致性关系,作者构建了六种可能的对齐情景模型(图2): * a. 理想对齐: 目标、报告和实际位置完全一致。 * b-d. 可补偿的失准: 其中两个位置一致,第三个位置偏离(例如,报告位置准确但实际位置有偏差,或反之)。 * e. 普遍失准: 三个位置均不一致,但偏差模式是稳定且可测量的。 * f. 不一致失准: 三个位置的关系无法预测或补偿,可能由时间或状态依赖性(如O形圈磨损)引起。

这个框架的核心在于区分系统性误差(上述失准)和统计误差(报告值的噪声)。对于可重复的失准模式(b-e),可以通过算法进行补偿;而对于不一致的情况(f),则构成了实现自动化的根本性硬件障碍。

2. 自动化硬件测试与数据采集 研究团队利用其自主研发的自动化控制系统 AutoEM 在定制化的探针校正JEOL GrandARM-300F扫描透射电子显微镜(STEM)上进行了一系列系统性测试。该平台(HubEM)允许通过低层应用程序接口(API)直接控制显微镜的放大倍数、倾斜和平移等参数,实现了实验流程的自动化。 * 测试对象与方法: 使用JEOL低X射线背景双倾样品杆。测试在STEM模式下进行,加速电压300 kV,放大倍数50,000倍。通过编写自动化脚本,程序化地控制样品台执行特定的移动序列,并在每个停留点自动采集图像并记录显微镜报告的位置坐标。 * 关键测试实验: * 滞后(回差)测试: 沿单一轴(X或Y方向)进行一系列连续步进移动(例如,连续5步),然后反向移动。比较每一步的目标位移与报告位移的差异,并通过对采集的图像进行透明叠加,直观检查实际移动的重叠情况。 * 轴间耦合测试: 执行包含正交方向移动的复杂路径(例如,沿X方向移动一步,再沿Y方向移动一步,如此交替),以检查一个轴的运动是否会影响另一个轴的报告或实际位置。 * 图像配准与“实际位置”确定: 这是量化误差的关键步骤。研究人员使用自定义的Python脚本,采用归一化互相关图像处理技术来分析连续采集的图像。通过计算图像间的交叉相关性峰值,可以高精度地确定样品特征在图像序列间的相对位移,从而计算出样品台移动的“实际位置”。显微镜的视野尺寸使用标准样品(Mag*i*Cal®)进行了校准。

3. 数据分析流程 数据分析的核心是对比三种位置(目标、报告、实际)之间的关系: * 目标 vs. 报告: 直接比较显微镜指令与反馈值,评估控制系统的内部一致性。 * 目标 vs. 实际: 评估指令执行的最终准确度。 * 报告 vs. 实际: 揭示显微镜反馈信息与真实世界状态之间的差距。 通过绘制位移误差与报告位置的关系图,以及叠加图像视觉检查,可以系统性地量化滞后效应、轴间耦合以及误差的累积情况。

主要研究结果 1. TEM样品台运动的复杂性得到确认: 研究明确指出,与普遍采用笛卡尔坐标系的SEM不同,典型的侧插式TEM样品台实际上在一个球面坐标系中运动。样品杆的移动(如X轴推拉)和测角仪的推动(Y和Z方向)共同作用,使样品围绕柱体内的一个半球形轴承枢轴点旋转。这种固有的几何结构使得运动预测比线性系统复杂得多。

2. 显著的滞后(回差)效应被量化: 在单一轴的步进测试中(图3),研究发现当改变运动方向时,第一步移动的报告位移通常小于目标位移(即存在“死区”),而后续同向步进的位移则更接近目标值。图像叠加清晰显示,方向改变后的第一步图像重叠区域更大,证实了实际移动不足。这种滞后效应是样品台机械结构(如齿轮间隙、O形圈形变)的典型表现,在手动操作中可由经验丰富的操作员下意识补偿,但在自动化流程中必须通过算法显式处理。

3. 轴间运动相对独立,但误差会累积: 在正交轴耦合测试中(图4),研究发现沿一个轴的运动不会显著影响另一个轴的报告位置值,表明在测试的样品台上,X和Y轴的机械控制基本上是解耦的。然而,对实际图像位置的分析表明,尽管报告位置可能指示已返回起点,但实际图像并未完全重合。这证明即使每次移动的误差很小,在没有主动反馈校正的情况下,这些误差会在多次移动命令中线性累积,导致目标特征最终移出视野。对于具有五个自由度(X, Y, Z, α, β)的TEM,这种累积效应会被放大。

4. 当前样品台属于“不一致失准”类别: 综合测试结果,作者判定他们所测试的TEM样品台行为符合图2f所描述的 “不一致失准” 情况。虽然存在可识别的滞后模式,但其行为具有历史依赖性(与之前的移动序列相关),且难以通过简单的线性模型进行完全补偿。这意味着仅依靠显微镜报告的位置信息无法可靠地预测样品的真实位置。

研究结论与意义 本研究得出结论,为了实现人类操作员水平的自动化性能,对样品台位置进行基于区域特征的主动反馈是至关重要的。目前,报告位置仅仅是发送给电机的指令信号的推断值,在目标位置和实际位置之间存在信息鸿沟。未来的全自动化显微镜将需要硬件与AI算法的协同改进。 * 科学价值: 本研究首次为TEM样品台运动性能评估提供了一个系统化、可量化的通用框架。它清晰揭示了当前商用TEM样品台在实现高精度、可重复自动化运动方面面临的根本性硬件限制,将讨论焦点从单纯的数据分析算法引向了关键的仪器控制精度问题。 * 应用价值: 该框架可供任何实验室用于评估其自身显微镜的性能,诊断误差来源,并指导自动化脚本的开发(例如,在改变方向时加入“过冲”补偿步骤)。研究指出,在规划自动化实验(如大面积拼接、倾斜系列采集)时,应考虑将关键扫描方向与性能更稳定的轴(研究中发现Y轴比X轴更稳定)对齐以优化结果。 * 对未来的启示: 研究呼吁设计和开发新一代TEM样品台,这些样品台应具备独立的轴控制、精确的位置反馈传感器(而非仅依赖电机指令),以及更好的机械稳定性。这是实现真正“闭环”、自适应、自主电子显微镜实验,从而在材料科学、化学和生物学中催生突破性发现的必经之路。

研究亮点 1. 开创性框架: 提出了首个用于系统评估TEM样品台运动精度和一致性的概念与数学框架,明确了“目标”、“报告”和“实际”位置的关键区别及六种失准情景。 2. 揭示核心瓶颈: 通过精心设计的自动化实验,定量化地证实了TEM样品台球面运动固有的复杂性以及机械滞后是自动化控制的主要障碍,而不仅仅是软件问题。 3. 方法论创新: 结合了自主研发的AutoEM自动化控制平台基于图像互相关的实际位置测量技术,形成了一套完整的“指令-报告-验证”评估流程,方法具有普适性和可重复性。 4. 明确的工程指导: 研究结果直接指出,实现可靠自动化不能仅依赖显微镜的内部控制信号,必须引入基于图像内容的外部反馈闭环,并为未来样品台的机械设计指明了改进方向(如集成直接位置传感)。

其他有价值的内容 研究团队将其测试图像数据及误差计算结果在Figshare平台上公开(DOI: 10.6084/m9.figshare.21735797.v2),促进了研究的可重复性和进一步验证。文中还提到了在另一台JEOL ARM-200CF显微镜上获得的补充数据,表明该评估方法适用于不同型号的设备。此外,作者在补充材料中提供了更详细的实验考虑因素和测试结果,为其他研究者实施类似评估提供了实用指南。这项工作强调了在“公平”(FAIR)显微镜和开放控制平台兴起的背景下,解决仪器底层控制精度这一长期被忽视问题的重要性。

上述解读依据用户上传的学术文献,如有不准确或可能侵权之处请联系本站站长:admin@fmread.com