超赞图-大语言模型

关于**图相关大语言模型（LLMs）**的超赞内容集合。

大语言模型（LLMs）在自然语言处理任务中取得了显著进展。然而，它们与图结构的集成（这在现实世界应用中普遍存在）仍然相对未被探索。本仓库旨在通过提供一个精选的研究论文列表来弥补这一差距，这些论文探讨了基于图的技术与LLMs的交叉领域。

目录

• 超赞图-大语言模型
  • 目录
  • 数据集、基准测试与综述
  • 提示
  • 通用图模型
  • 大型多模态模型（LMMs）
  • 应用
    • 基础图推理
    • 节点分类
    • 图分类/回归
    • 知识图谱
    • 分子图
    • 图鲁棒性
    • 其他
  • 资源与工具
  • 贡献
  • 星标历史

数据集、基准测试与综述

• (NAACL'21) 基于知识图谱的合成语料生成用于知识增强语言模型预训练 [论文][代码]
• (NeurIPS'23) 语言模型能用自然语言解决图问题吗？ [论文][代码]
• (IEEE Intelligent Systems 2023) 将图与大语言模型集成：方法与展望 [论文]
• (ICLR'24) 像图一样说话：为大语言模型编码图 [论文]
• (KDD'24) LLM4DyG：大语言模型能解决动态图问题吗？ [论文][代码]
• (arXiv 2023.05) GPT4Graph：大语言模型能理解图结构数据吗？一项实证评估和基准测试 [论文][代码]
• (arXiv 2023.08) 图遇见LLMs：迈向大型图模型 [论文]
• (arXiv 2023.10) 迈向图基础模型：综述与展望 [论文]
• (arXiv 2023.11) 知识图谱能减少LLMs的幻觉吗？：一项综述 [论文]
• (arXiv 2023.11) 图遇见大语言模型：进展与未来方向综述 [论文][代码]
• (arXiv 2023.12) 图上的大语言模型：全面综述 [论文][代码]
• (arXiv 2024.02) 迈向多功能图学习方法：从大语言模型的视角 [论文]
• (arXiv 2024.04) 大语言模型（LLMs）时代的图机器学习 [论文]
• (arXiv 2024.05) 图上大语言模型综述 [论文][代码]
• (arXiv 2024.07) GLBench：用于大语言模型图任务的综合基准 [论文][代码]
• (arXiv 2024.07) 大语言模型（LLMs）在图上的学习：深入探讨模型鲁棒性 [论文][代码]

提示

• (EMNLP'23) StructGPT：大语言模型推理结构化数据的通用框架 [论文][代码]
• (AAAI'24) 思维图：用大语言模型解决复杂问题 [论文][代码]
• (arXiv 2023.05) PiVe：通过迭代验证提示改进LLMs的基于图的生成能力 [论文][代码]
• (arXiv 2023.08) 通过新框架提升大语言模型的逻辑推理能力：思维图 [论文]
• (arxiv 2023.10) 思维传播：大语言模型复杂推理的类比方法 [论文]
• (arxiv 2024.01) 推理拓扑：揭秘思维链、思维树和思维图 [论文]
• (arxiv 2024.04) 图思维链：通过图推理增强大语言模型 [论文]

通用图模型

• (ICLR'24) 一个适用于所有分类任务的图模型训练 [论文][代码]
• (arXiv 2023.08) 自然语言是图所需要的一切 [论文][代码]
• (arXiv 2023.10) GraphGPT: 大型语言模型的图指令微调 [论文][代码][中文博客]
• (arXiv 2023.10) 图智能体：图的显式推理智能体 [论文]
• (arXiv 2024.02) 让你的图说话：为大语言模型编码结构化数据 [论文]
• (arXiv 2024.02) G-Retriever: 用于文本图理解和问答的检索增强生成 [论文][代码][博客]
• (arXiv 2024.02) InstructGraph: 通过以图为中心的指令微调和偏好对齐来增强大语言模型 [论文][代码]
• (arXiv 2024.02) LLaGA: 大型语言和图助手 [论文][代码]
• (arXiv 2024.02) HiGPT: 异构图语言模型 [论文][代码]
• (arXiv 2024.02) UniGraph: 从自然语言学习跨领域图基础模型 [论文]
• (arXiv 2024.06) UniGLM: 为文本属性图训练统一语言模型 [论文][代码]
• (arXiv 2024.07) GOFA: 联合图语言建模的通用生成模型 [论文][代码]

大型多模态模型 (LMMs)

• (NeurIPS'23) GraphAdapter: 使用双知识图调整视觉语言模型 [论文][代码]
• (arXiv 2023.10) 用于生成任务的多模态图学习 [论文][代码]
• (arXiv 2024.02) 为多模态大语言模型的图推理渲染图 [论文]

应用

基础图推理

• (KDD'24) GraphWiz: 一个用于图问题的指令跟随语言模型 [论文][代码][项目]
• (arXiv 2023.04) Graph-ToolFormer: 通过ChatGPT增强的提示来赋予LLMs图推理能力 [论文][代码]
• (arXiv 2023.10) GraphText: 文本空间中的图推理 [论文]
• (arXiv 2023.10) GraphLLM: 提升大语言模型的图推理能力 [论文][代码]

节点分类

• (ICLR'24) 解释作为特征：用于文本属性图的基于LLM的特征 [论文][代码]
• (ICLR'24) 使用大语言模型(LLMs)进行图上的无标签节点分类 [论文]
• (WWW'24) GNN能成为LLMs的好适配器吗？ [论文][代码]
• (CIKM'24) 为文本属性图学习蒸馏大语言模型 [论文]
• (arXiv 2023.07) 探索大语言模型(LLMs)在图学习中的潜力 [论文][代码]
• (arXiv 2023.09) LLMs能有效利用结构信息进行图学习吗：何时以及为什么 [论文][代码]
• (arXiv 2023.10) 用大语言模型(LLMs)增强文本属性图学习 [论文]
• (arXiv 2023.10) 用大语言模型进行文本属性图的解耦表示学习 [论文]
• (arXiv 2023.11) 大语言模型作为文本属性图的拓扑结构增强器 [论文]
• (arXiv 2024.01) 文本图上大语言模型的高效微调和推理 [论文][代码]
• (arXiv 2024.02) 基于相似度的图LLMs邻居选择 [论文] [代码]
• (arXiv 2024.02) 为文本属性图学习蒸馏大语言模型 [论文]
• (arXiv 2024.02) GraphEdit: 用于图结构学习的大语言模型 [论文][代码]
• (arXiv 2024.05) LOGIN: 一个大语言模型咨询的图神经网络训练框架 [论文][代码]
• (arXiv 2024.06) GAugLLM: 用大语言模型改进文本属性图的图对比学习 [论文][代码]
• (arXiv 2024.07) 通过主动从大语言模型中提取知识来增强数据有限的图神经网络 [论文]
• (arXiv 2024.07) 全对部分：高效整合大语言模型用于图神经网络的消息传递 [论文]

图分类/回归

• (arXiv 2023.06) GIMLET：用于基于指令的分子零样本学习的统一图文模型 [论文][代码]
• (arXiv 2023.07) 大型语言模型能否增强分子性质预测？ [论文][代码]

知识图谱

• (AAAI'22) 通过动态文档型知识图谱增强大型语言模型的故事理解能力 [论文]
• (EMNLP'22) 代码语言模型是少样本常识学习器 [论文][代码]
• (SIGIR'23) 模式感知参考作为提示改进数据高效知识图谱构建 [论文][代码]
• (TKDE'23) AutoAlign：大型语言模型实现的全自动高效知识图谱对齐 [论文][代码]
• (AAAI'24) 利用大型语言模型的图神经提示 [论文][代码]
• (NAACL'24) zrLLM：利用大型语言模型在时态知识图谱上进行零样本关系学习 [论文]
• (ICLR'24) Think-on-Graph：大型语言模型在知识图谱上的深度和负责任推理 [论文][代码]
• (arXiv 2023.04) CodeKGC：用于生成式知识图谱构建的代码语言模型 [论文][代码]
• (arXiv 2023.05) 知识图谱补全模型是少样本学习器：利用LLM进行电子商务关系标注的实证研究 [论文]
• (arXiv 2023.08) MindMap：知识图谱提示激发大型语言模型的思维图 [论文][代码]
• (arXiv 2023.10) 可信路径语言建模用于知识图谱上的可解释推荐 [论文]
• (arXiv 2023.10) 图上推理：忠实和可解释的大型语言模型推理 [论文][代码]
• (arXiv 2023.11) 利用大型语言模型在时态知识图谱上进行零样本关系学习 [论文]
• (arXiv 2023.12) KGLens：一种参数化知识图谱解决方案，用于评估LLM知道和不知道什么 [论文]
• (arXiv 2024.02) 大型语言模型在知识蒸馏中遇见图神经网络 [论文]
• (arXiv 2024.02) 大型语言模型可以学习时间推理 [论文][代码]
• (arXiv 2024.02) 知识图谱大型语言模型(KG-LLM)用于链接预测 [论文]
• (arXiv 2024.03) 需要时呼叫我：LLM可以高效和忠实地推理结构化环境 [论文]
• (arXiv 2024.04) 使用大规模知识图谱评估大型语言模型的事实性 [论文][代码]
• (arXiv 2024.04) 提取、定义、规范化：基于LLM的知识图谱构建框架 [论文]
• (arXiv 2024.05) FiDeLiS：大型语言模型在知识图谱问答中的忠实推理 [论文]
• (arXiv 2024.06) 先探索后确定：GNN-LLM协同框架用于知识图谱推理 [论文]

分子图

• (arXiv 2024.06) MolecularGPT：用于少样本分子性质预测的开放大型语言模型(LLM) [论文][代码]
• (arXiv 2024.06) HIGHT：用于图-语言对齐的分层图标记化 [论文][项目]
• (arXiv 2024.06) MolX：通过多模态扩展增强大型语言模型的分子学习 [论文]
• (arXiv 2024.06) LLM和GNN是互补的：为多模态图学习蒸馏LLM [论文]

图鲁棒性

• (arXiv 2024.05) 用词入侵：理解文本层面的图注入攻击 [论文]

其他

• (WSDM'24) LLMRec：基于大型语言模型的图增强推荐系统 [论文][代码][中文博客]。
• (arXiv 2023.03) 有求必应（图形绘制）：测试ChatGPT应用图形布局算法的潜力 [论文]
• (arXiv 2023.05) 图遇上大语言模型：一种新颖的协同过滤方法，用于稳健的对话理解 [论文]
• (arXiv 2023.05) 基于ChatGPT的图神经网络用于股票走势预测 [论文][代码]
• (arXiv 2023.10) 使用GPT-4进行图神经架构搜索 [论文]
• (arXiv 2023.11) 生物医学知识图谱增强的大型语言模型提示生成 [论文][代码]
• (arXiv 2023.11) 大型语言模型中用于多跳问答的图引导推理 [论文]
• (arXiv 2024.02) 大型语言模型图形回忆的微观结构和准确性 [论文]
• (arXiv 2024.02) 基于检索增强生成的大型语言模型的因果图发现 [论文]
• (arXiv 2024.02) 异步计划推理中的图增强大型语言模型 [论文][代码]
• (arXiv 2024.02) 使用大型语言模型的高效因果图发现 [论文]
• (arXiv 2024.03) 探索大型语言模型在图生成中的潜力 [论文]
• (arXiv 2024.05) 别忘了连接！利用基于图的重排序改进RAG [论文]
• (arXiv 2024.05) 图学习能改善任务规划吗？ [论文][代码]
• (arXiv 2024.06) GNN-RAG：用于大型语言模型推理的图神经检索 [论文][代码]
• (arXiv 2024.07) LLMExplainer：基于大型语言模型的贝叶斯推理用于图解释生成 [论文]

资源与工具

• GraphGPT：使用GPT-3从非结构化文本中推断知识图谱
• GraphML：图标记语言。一种基于XML的图形文件格式。
• GML：图建模语言。以GML格式读取图。

贡献

👍 欢迎对本仓库做出贡献！

如果你发现了相关资源，欢迎开启一个issue或提交一个pull request。

- (*会议|期刊*) 论文名称 [[pdf](链接)][[代码](链接)]

星标历史