分享自:

揭示移动交易满意度驱动因素:基于BERTopic和生成式AI的零售投资者体验文本挖掘

期刊:Journal of Retailing and Consumer ServicesDOI:10.1016/j.jretconser.2024.104066

关于《Unveiling the drivers of satisfaction in mobile trading: Contextual mining of retail investor experience through BERTopic and generative AI》的学术研究报告

本报告旨在向学界同仁介绍一篇关于移动股票交易服务满意度影响因素的最新研究成果。该研究由来自韩国嘉泉大学(Gachon University)的Jisu Yi、同德女子大学(Dongduk Women‘s University)的Yun Kyung Oh以及首尔市立大学(University of Seoul)的Jung-Min Kim合作完成,并发表于《Journal of Retailing and Consumer Services》期刊(2025年卷82期,文章编号104066)。这项研究综合运用了先进的自然语言处理(Natural Language Processing, NLP)技术与生成式人工智能(Generative AI),深入挖掘了零售投资者对主流移动交易应用程序的文本评论,系统性地揭示了影响其满意度的关键服务质量维度及其作用机制。

学术背景与研究目标 本研究的核心科学领域是消费者行为学与金融服务信息系统的交叉领域,具体聚焦于移动金融服务的采纳后评估。随着移动股票交易的普及,各类交易应用程序层出不穷,功能各异。然而,现有文献大多偏重于用户采纳前的意愿研究(如基于技术接受模型TAM、计划行为理论TPB等),对于用户实际使用服务后的满意度(即采纳后阶段)驱动因素,特别是在移动股票交易这一高风险、高时效性要求的细分领域,研究尚不充分。移动股票交易相较于移动银行或支付,具有更高的金融风险、对实时市场数据、快速交易执行和严格安全措施的独特需求,因此亟需专门研究。

基于服务品质(ServQual)理论框架,本研究旨在填补这一空白,并回答三个核心研究问题:第一,零售投资者在采纳移动交易服务后,关注的关键质量维度有哪些?第二,这些质量维度如何影响投资者的满意度?第三,不同经纪商类型(全服务型 vs. 纯线上型)的平台,其质量维度对满意度的影响是否存在差异?

详细研究流程与方法 本研究设计了一个系统、多步骤的分析框架,主要包含四个核心流程。

流程一:数据采集与预处理。 研究对象为2020年至2022年间,从Google Play和苹果App Store收集的四个领先移动交易应用(Robinhood, Webull, Fidelity, TD Ameritrade)的用户评论。为确保评论内容具有足够的分析深度并平衡各应用的代表性,研究者筛选了长度至少为20个单词、包含至少三个句子的评论,并采用每月随机抽取100条评论的策略,最终为每家公司在36个月内构建了一个包含3600条评论的平衡样本集,总计14,400条评论用于分析。描述性统计显示,除Robinhood外,样本评论的平均评分普遍低于原始数据集,符合负面评论通常更详尽的研究发现。

流程二:基于BERTopic的主题识别与生成式AI标注。 这是本研究的核心分析方法。首先,研究者使用BERTopic这一先进的非监督机器学习主题建模技术对评论文本进行分析。BERTopic结合了Sentence-BERT文本向量化、UMAP降维和HDBSCAN聚类,能够更有效地捕捉短文本中的语义关系和高层次主题。通过对80,691个句子进行处理,最终识别出33个独特的主题(如“股票交易”、“银行问题”、“导航”、“客户支持”、“订单取消”等)。为提升主题解释的客观性与效率,研究者创新性地引入了生成式人工智能工具(OpenAI的ChatGPT-4)进行主题标注和情感分类。他们将BERTopic输出的每个主题的代表性关键词和示例句子作为提示词输入ChatGPT-4,由模型生成主题标签并判断其情感极性(正面/负面),随后由研究人员进行核对和微调。这一方法显著优于传统LDA主题模型中研究者手动标注的“词袋”法。

流程三:主题归类至服务质量维度。 基于ServQual理论及对移动金融服务文献的梳理,研究者定义了七个初始类别:功能性(Functionality)、信息质量(Information Quality)、可用性(Usability)、服务质量(Service Quality)、系统质量(System Quality)、用户体验(User Experience)和投资损失(Investment Loss)。由三名研究员和ChatGPT-4共同将33个主题归类到这七个维度中。通过计算Fleiss‘ Kappa系数评估评分者间信度,在剔除几个分类不一致或公司特定的主题后,Kappa值达到0.833,表明归类结果具有高度一致性。最终,用于构建解释模型的变量包括五大质量维度的正负面反馈(功能性、可用性、信息质量、服务质量、系统质量),以及控制变量(正面/负面用户体验、投资损失)。

流程四:构建解释模型与可视化分析。 研究者构建了多元线性回归模型,以用户星级评分(1-5分)为因变量,以上述质量维度变量及经纪商类型(纯线上型为1,全服务型为0)为自变量,检验各维度对满意度的影响。模型不仅分析了全样本,还进行了分组回归(全服务型 vs. 纯线上型)和包含交互项的调节效应分析,以探究经纪商类型的差异。此外,本研究还提出并应用了一个新颖的可视化工具——主题评级影响与频率分析(Topic Rating Impact and Frequency Analysis, TRIFA)。该工具以二维象限图形式展示各主题,横轴为评论中提及该主题的频率,纵轴为回归模型中该主题对评分的净影响系数(控制其他变量后)。图形被划分为四个象限,分别对应“低频高影响(隐藏优势)”、“高频高影响(核心优势)”、“低频低影响(潜在问题)”和“高频低影响(关键痛点)”,为服务提供商提供了直观的战略诊断工具。

主要研究结果 回归模型(全样本)结果清晰揭示了移动交易平台用户满意度的“增强器”与“抑制器”。 * 满意度增强器:按影响力排序依次为:可用性正面反馈(β=0.932, p<0.01)、信息质量正面反馈(β=0.766, p<0.01)、服务质量正面反馈(β=0.579, p<0.01)、功能性正面反馈(β=0.424, p<0.01)以及系统质量正面反馈(β=0.190, p<0.01)。这表明,直观的导航、易学的界面、美观的设计(可用性),以及全面、准确、及时的市场信息(信息质量)是提升用户满意度的最关键因素。 * 满意度抑制器:按负面影响强度排序依次为:服务质量负面反馈(β=-0.878, p<0.01)、系统质量负面反馈(β=-0.555, p<0.01)、功能性负面反馈(β=-0.480, p<0.01)以及可用性负面反馈(β=-0.410, p<0.01)。糟糕的客户服务、系统延迟、登录故障、订单执行问题等会严重损害用户满意度。控制变量中,投资损失的提及对评分有最强烈的负面影响(β=-0.914, p<0.01),揭示了交易结果与平台满意度之间的紧密关联。

关于经纪商类型的调节效应分析得出重要发现: * 全服务型经纪商:用户满意度显著受到正面服务质量的强烈驱动(β=0.864),而对负面服务质量的容忍度相对较高(β=-0.472)。负面系统质量问题是其主要抑制器(β=-0.680)。 * 纯线上型经纪商:用户满意度对正面服务质量不敏感(不显著),但对负面服务质量的反应极其负面(β=-1.082)。同时,正面功能性、可用性和系统质量能为其带来比全服务型更大的满意度提升(交互项显著为正),而负面可用性和系统质量导致的满意度下降程度则小于全服务型。 * 调节效应:交互项分析证实,纯线上型经纪商在利用功能性、可用性、系统质量的正面反馈提升满意度方面更具优势;但在遭受服务质量负面评价时,其满意度受损程度显著高于全服务型经纪商。

TRIFA可视化分析进一步将上述发现具象化。例如,对于全服务型经纪商,“正面服务”位于第一象限(低频高影响),是需要强化宣传的隐藏优势;而“负面系统质量”位于第四象限(高频高影响),是需要优先解决的关键痛点。对于纯线上型经纪商,“负面服务质量”是其第四象限的突出问题,需严防。

研究结论与价值 本研究得出以下核心结论:移动股票交易服务的用户满意度由五个关键质量维度共同决定,其中信息质量的重要性尤为突出,体现了该领域对决策支持信息的高度依赖。可用性和信息质量是主要的满意度增强器,而服务质量和系统质量则是主要的抑制器。研究首次揭示了经纪商类型的调节作用:全服务型经纪商的核心竞争力在于高标准的服务,而纯线上型经纪商则更依赖卓越的技术功能、界面和系统稳定性,且必须避免在服务环节出现疏漏。

研究的理论贡献主要体现在:1) 深化了移动金融服务,特别是采纳后满意度的研究,聚焦于独特的移动股票交易场景;2) 在营销和信息系统文献中,率先创新性地结合了BERTopic主题建模与生成式AI(ChatGPT)进行客观、深入的主题解释与情感分析,提升了文本挖掘的方法论水平;3) 拓展了ServQual理论在数字金融服务领域的应用,通过数据驱动的方式识别出更贴合移动交易场景的具体质量子维度;4) 提出了通用的TRIFA可视化框架,可用于任何基于多属性态度模型的产品或服务评论分析。

研究的实践意义为服务提供商提供了明确的管理启示:平台应优先优化界面可用性和信息内容质量;必须建立主动、高效的客户服务体系和稳健的IT基础设施以应对主要抑制因素。全服务型经纪商应加强个性化顾问服务,而纯线上型经纪商需持续投资技术创新,并辅以可靠的自动化或人工客服支持,绝不能因成本节约而牺牲服务可靠性。

研究亮点 本研究的亮点在于:1) 研究视角新颖:专注于移动股票交易这一高风险、高时效性金融服务的采纳后满意度,填补了研究空白;2) 方法论创新:成功将前沿的BERTopic主题建模技术与生成式AI的语义理解能力相结合,用于消费者评论分析,实现了更客观、高效的主题提取与标注;3) 分析深度显著:不仅识别了影响因素,还通过回归模型量化了其影响强度,并深入揭示了不同商业模式(经纪商类型)下的异质性影响,结论更具策略指导性;4) 工具实用性强:提出的TRIFA模型将复杂的文本分析和统计结果转化为直观的战略诊断工具,兼具学术价值与应用价值。

其他有价值内容 研究也坦诚了其局限性,例如未考虑用户个体心理差异和人口统计学变量,以及BERTopic方法本身的计算复杂性和技术门槛。这些为未来研究指明了方向,例如结合问卷调查或访谈进行混合方法研究,以及探索更高效的模型处理流程。尽管如此,本研究无疑为理解和提升移动金融服务的用户体验提供了强有力的分析框架和深刻见解。

上述解读依据用户上传的学术文献,如有不准确或可能侵权之处请联系本站站长:admin@fmread.com