这篇文档属于类型a,报告了一项原创性研究。以下是学术报告内容:
知识图谱增强大语言模型推理:Paths-over-Graph方法研究
作者:Xingyu Tan(澳大利亚新南威尔士大学、CSIRO Data61)、Xiaoyang Wang*(新南威尔士大学)、Qing Liu(CSIRO Data61)等
期刊:Proceedings of the ACM Web Conference 2025 (WWW ‘25)
研究领域:人工智能自然语言处理(NLP)与知识图谱(Knowledge Graph, KG)的交叉领域,聚焦于知识图谱问答(KGQA)任务。
研究动机:
- 问题现状:大语言模型(LLMs)在复杂推理和知识密集型任务中存在“幻觉”(hallucination)和知识滞后问题,而传统基于知识图谱的方法难以处理多跳推理(multi-hop reasoning)、多实体问题(multi-entity questions)及有效利用图谱结构。
- 科学目标:提出Paths-over-Graph (PoG)方法,通过动态多跳路径探索将知识图谱的逻辑推理路径与LLMs结合,提升推理的可解释性和忠实性(faithfulness)。
采用三步束搜索(three-step beam search):
1. 模糊选择(Fuzzy selection):用预训练语言模型(如Sentence-BERT)快速过滤无关路径。
2. 精确路径选择(Precise path selection):通过LLM提示选择最可能包含正确答案的路径。
3. 分支缩减选择(Branch reduced selection):结合图谱结构逐步缩小候选路径。
创新方法:
- 动态深度搜索:根据LLM预测动态调整搜索深度。
- 三阶段探索与剪枝:首次实现多实体深度路径检测,结合图结构、LLM提示和预训练模型。
科学价值:
- 方法论创新:首次将知识图谱路径作为逻辑推理链整合至LLMs,解决传统方法依赖局部最优解的问题。
- 可解释性:路径提供透明推理过程,减少幻觉。
应用价值:
- 即插即用框架:兼容不同LLMs和KGs,支持低成本知识更新(避免LLM重训练)。
- 工业场景:适用于医疗、金融等需高可信推理的领域。
此研究为知识增强的LLM推理提供了新范式,未来可扩展至多模态知识图谱与实时推理场景。