awesome-large-graph-model

awesome-large-graph-model

大规模图模型研究前沿综述

这个项目整理了大规模图模型相关的研究文献,涵盖理论基础和实际应用。内容包括图神经网络与大型语言模型的结合、LLM在图任务中的应用、图提示学习和参数高效微调等技术。同时涉及知识图谱、分子科学和神经架构搜索等领域。项目为图机器学习研究提供了全面的文献综述,有助于推动该领域的发展。

大图模型图机器学习图神经网络大语言模型图提示学习Github开源项目
<h1 align="center"><b>大规模图模型精选资源</b></h1> <p align="center"> <a href="https://github.com/THUMNLab/awesome-large-graph-model/pulls"><img src="https://img.shields.io/badge/PRs-Welcome-green" alt="PRs"></a> <a href="https://awesome.re"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/257ac57b-8108-4def-aa4b-756a6e7320af.svg" alt="awesome"></a> <!-- <a href="https://"><img src="https://img.shields.io/badge/-Website-grey?logo=svelte&logoColor=white" alt="Website"></a> --> <img src="https://img.shields.io/github/stars/THUMNLab/awesome-large-graph-model?color=yellow&label=Star" alt="Stars" > <img src="https://img.shields.io/github/forks/THUMNLab/awesome-large-graph-model?color=blue&label=Fork" alt="Forks" > </p>

本仓库收集了与大规模图模型相关的论文列表。类似于自然语言处理领域的大型语言模型(LLMs),我们相信大规模图模型将为图机器学习带来革命性的变革,为研究人员和实践者创造令人兴奋的机会!更多详情,请参阅我们的观点论文:图遇大语言模型:迈向大规模图模型

我们将尽最大努力保持此论文列表的更新。如果您发现有相关论文遗漏或有任何建议,请随时通过我们仓库的拉取请求与我们联系。

论文

观点与综述

总览

  • [NeurIPS 2023 GLFrontiers研讨会] 图遇大语言模型:迈向大规模图模型 [论文]
  • [arXiv 2024.02] 图机器学习基础的未来方向 [论文]
  • [arXiv 2024.02] 图基础模型 [论文]
  • [arXiv 2023.12] 图上的大型语言模型:全面综述 [论文]
  • [arXiv 2023.11] 图与大型语言模型的结合:进展与未来方向综述 [论文]
  • [arXiv 2023.10] 迈向图基础模型:综述与展望 [论文]
  • [arXiv 2023.10] 将图与大型语言模型整合:方法与前景 [论文]

提示学习

  • [arXiv 2024.02] 图上的小样本学习:从元学习到预训练和提示学习 [论文]
  • [arXiv 2023.11] 图提示学习:全面综述与展望 [论文]
  • [arXiv 2023.03] 图提示方法综述:技术、应用和挑战 [论文]

模型

作为图模型的大语言模型

2024年

  • [arXiv 2024.02] 为多模态大语言模型中的图推理渲染图 [论文]
  • [arXiv 2024.02] 探索大语言模型在图推理方面的局限性 [论文]
  • [arXiv 2024.01] 文本图上大语言模型的高效微调和推理 [论文]
  • [arXiv 2024.01] 使用大语言模型在大规模异构图上进行可扩展的链接预测 [论文]
  • [arXiv 2024.01] ChatGraph:与您的图表对话 [论文]

2023年

  • [NeurIPS 2023] 语言模型能用自然语言解决图问题吗? [论文] [代码]
  • [NeurIPS 2023] WalkLM:用于属性图嵌入的统一语言模型微调框架 [论文]
  • [EMNLP 2023] 释放语言模型在文本属性图中的力量 [论文]
  • [ICML 研讨会 2023] 使用预训练语言模型用自然语言解决图任务 [论文]
  • [arXiv 2023.12] 图上大语言模型的高效微调 [论文]
  • [arXiv 2023.11] 大语言模型作为文本属性图的拓扑结构增强器 [论文]
  • [arXiv 2023.10] LLM4DyG:大语言模型能解决动态图问题吗? [论文]
  • [arXiv 2023.10] 使用大语言模型进行文本属性图的解耦表示学习 [论文]
  • [arXiv 2023.10] 利用大语言模型增强文本属性图学习 [论文]
  • [arXiv 2023.10] GraphLLM:提升大语言模型的图推理能力 [论文] [代码]
  • [arXiv 2023.10] 超越文本:深入探讨大语言模型理解图数据的能力 [论文]
  • [arXiv 2023.10] 使用大语言模型进行图上的无标签节点分类 [论文] [代码]
  • [arXiv 2023.10] 像图一样说话:为大语言模型编码图 [论文]
  • [arXiv 2023.10] GraphText:在文本空间中进行图推理 [论文]
  • [arXiv 2023.10] 一模适万能:训练一个图模型适用于所有分类任务 [论文] [代码]
  • [arXiv 2023.09] 大语言模型能否有效利用结构信息进行图学习:何时及为什么 [论文] [代码]
  • [arXiv 2023.08] 评估大语言模型在图上的表现:性能洞察和比较分析 [论文] [代码]
  • [arXiv 2023.08] 自然语言是图所需的全部 [论文]
  • [arXiv 2023.08] SimTeG:一种令人沮丧的简单方法改进了文本图学习 [论文] [代码]
  • [arXiv 2023.07] 探索大型语言模型(LLMs)在图学习中的潜力 [论文] [代码]
  • [arXiv 2023.05] 解释作为特征:基于LLM的文本属性图特征 [论文] [代码]
  • [arXiv 2023.05] GPT4Graph:大型语言模型能否理解图结构数据?一项实证评估与基准测试 [论文]

图提示

2024年

  • [WWW 2024] MultiGPrompt:图上多任务预训练和提示 [论文]
  • [AAAI 2024] HGPROMPT:连接同构和异构图的少样本提示学习 [论文]
  • [AAAI 2024] 测量任务相似性及其在图神经网络微调中的应用 [论文] [代码]
  • [KBS 2024] GPL-GNN:图神经网络的图提示学习 [论文] [代码]
  • [IPM 2024] G-Prompt:基于图元的图分类提示调优 [论文]

2023年

  • [NeurIPS 2023] PRODIGY:实现图上的上下文学习 [论文] [代码]
  • [NeurIPS 2023] 图神经网络的通用提示调优 [论文]
  • [MM 2023] 用于节点分类的传播链提示 [论文]
  • [CVPR 2023] 深度图重编程 [论文]
  • [KDD 2023] 一网打尽:图神经网络的多任务提示 [论文] [代码]
  • [WWW 2023] GraphPrompt:统一图神经网络的预训练和下游任务 [论文] [代码]
  • [WWW 2023] 知识图谱迁移的结构预训练和提示调优 [论文] [代码]
  • [KDD 2022] GPPT:图预训练和提示调优以泛化图神经网络 [论文]
  • [arXiv 2023.11] 广义图提示:统一图上的预训练和下游任务 [论文] [代码]
  • [arXiv 2023.10] 使用基于结构的提示增强图神经网络 [论文]
  • [arXiv 2023.10] HetGPT:利用提示调优增强预训练异构图神经网络的能力 [论文]
  • [arXiv 2023.10] ULTRA-DP:统一图预训练与多任务图双重提示 [论文]
  • [arXiv 2023.10] 多视图图对比学习的提示调优 [论文]
  • [arXiv 2023.09] 基于提示的节点特征提取器用于文本属性图的少样本学习 [论文]
  • [arXiv 2023.09] 图转换器的深度提示调优 [论文]
  • [arXiv 2023.07] 基于提示的零样本和少样本节点分类:多模态方法 [论文]
  • [arXiv 2023.02] SGL-PT:具有图提示调优的强大图学习器 [论文]

图参数高效微调

  • [AAAI 2024] G-Adapter:面向图transformer网络的结构感知参数高效迁移学习 [论文]
  • [AAAI 2024] AdapterGNN:高效增量调整提升图神经网络的泛化能力 [论文]
  • [arXiv 2023.08] 搜索微调预训练图神经网络用于图级任务 [论文]

应用

知识图谱

  • [arXiv 2023.08] 大型语言模型和知识图谱:机遇与挑战 [论文]
  • [arXiv 2023.06] 统一大型语言模型和知识图谱:一份路线图 [论文]

分子

  • [NeurIPS 2023] GIMLET:基于指令的分子零样本学习统一图文模型 [论文] [代码]
  • [arXiv 2023.09] DrugChat:为药物分子图赋予类ChatGPT能力 [论文] [代码]
  • [arXiv 2023.08] GIT-Mol:面向分子科学的多模态大型语言模型,集成图、图像和文本 [论文]
  • [arXiv 2023.07] 大型语言模型能否增强分子性质预测? [论文] [代码]

神经架构搜索

  • [arXiv 2023.12] 基于GPT-4的异构图神经架构搜索 [论文]
  • [arXiv 2023.10] 基于GPT-4的图神经架构搜索 [论文]
  • [arXiv 2023.09] 通过基于LLM的自主智能体释放图学习的力量 [论文]
  • [arXiv 2023.02] EvoPrompting:用于代码级神经架构搜索的语言模型 [论文] [代码]

其他

  • [arXiv 2023.10] AUTOPARLLM:基于GNN指导的大型语言模型自动代码并行化 [论文]
  • [arXiv 2023.09] VulnSense:通过图神经网络和语言模型的多模态学习实现以太坊智能合约的高效漏洞检测 [论文]
  • [arXiv 2023.08] FoodGPT:基于增量预训练和知识图谱提示的食品检测领域大型语言模型 [论文]
  • [arXiv 2023.06] 基于ChatGPT的图神经网络用于股票走势预测 [论文]
  • [arXiv 2023.05] 图遇上LLM:一种用于稳健对话理解的协同过滤新方法 [论文]

大语言模型的图结构

思维图谱

  • [arXiv 2023.08] 思维导图:知识图谱提示激发大语言模型的思维图谱 [论文]
  • [arXiv 2023.08] 思维图谱:利用大语言模型解决复杂问题 [论文] [代码]
  • [arXiv 2023.08] 增强大语言模型的推理能力:基于图的验证方法 [论文]
  • [arXiv 2023.08] 通过新框架提升大语言模型的逻辑推理能力:思维图谱 [论文]
  • [arXiv 2023.08] 像专家一样思考:多模态超图思维(HoT)推理以增强基础模型 [论文]
  • [arXiv 2023.07] 基于图的思考:大语言模型结合知识图谱的深度和负责任推理 [论文]
  • [arXiv 2023.05] 超越思维链:大语言模型中有效的思维图谱推理 [论文]

图作为工具

  • [arXiv 2023.05] StructGPT:大语言模型推理结构化数据的通用框架 [论文] [代码]
  • [arXiv 2023.04] Graph-ToolFormer:通过ChatGPT增强提示来赋予大语言模型图推理能力 [论文] [代码]

引用

如果您觉得这个仓库有帮助,请考虑引用我们的观点论文

@article{zhang2023large,
  title={Graph Meets LLMs: Towards Large Graph Models},
  author={Zhang, Ziwei and Li, Haoyang and Zhang, Zeyang and Qin, Yijian and Wang, Xin and Zhu, Wenwu},
  journal={NeurIPS 2023 GLFrontiers Workshop},
  year={2023}
}

编辑推荐精选

问小白

问小白

全能AI智能助手,随时解答生活与工作的多样问题

问小白,由元石科技研发的AI智能助手,快速准确地解答各种生活和工作问题,包括但不限于搜索、规划和社交互动,帮助用户在日常生活中提高效率,轻松管理个人事务。

热门AI助手AI对话AI工具聊天机器人
Transly

Transly

实时语音翻译/同声传译工具

Transly是一个多场景的AI大语言模型驱动的同声传译、专业翻译助手,它拥有超精准的音频识别翻译能力,几乎零延迟的使用体验和支持多国语言可以让你带它走遍全球,无论你是留学生、商务人士、韩剧美剧爱好者,还是出国游玩、多国会议、跨国追星等等,都可以满足你所有需要同传的场景需求,线上线下通用,扫除语言障碍,让全世界的语言交流不再有国界。

讯飞智文

讯飞智文

一键生成PPT和Word,让学习生活更轻松

讯飞智文是一个利用 AI 技术的项目,能够帮助用户生成 PPT 以及各类文档。无论是商业领域的市场分析报告、年度目标制定,还是学生群体的职业生涯规划、实习避坑指南,亦或是活动策划、旅游攻略等内容,它都能提供支持,帮助用户精准表达,轻松呈现各种信息。

AI办公办公工具AI工具讯飞智文AI在线生成PPTAI撰写助手多语种文档生成AI自动配图热门
讯飞星火

讯飞星火

深度推理能力全新升级,全面对标OpenAI o1

科大讯飞的星火大模型,支持语言理解、知识问答和文本创作等多功能,适用于多种文件和业务场景,提升办公和日常生活的效率。讯飞星火是一个提供丰富智能服务的平台,涵盖科技资讯、图像创作、写作辅助、编程解答、科研文献解读等功能,能为不同需求的用户提供便捷高效的帮助,助力用户轻松获取信息、解决问题,满足多样化使用场景。

热门AI开发模型训练AI工具讯飞星火大模型智能问答内容创作多语种支持智慧生活
Spark-TTS

Spark-TTS

一种基于大语言模型的高效单流解耦语音令牌文本到语音合成模型

Spark-TTS 是一个基于 PyTorch 的开源文本到语音合成项目,由多个知名机构联合参与。该项目提供了高效的 LLM(大语言模型)驱动的语音合成方案,支持语音克隆和语音创建功能,可通过命令行界面(CLI)和 Web UI 两种方式使用。用户可以根据需求调整语音的性别、音高、速度等参数,生成高质量的语音。该项目适用于多种场景,如有声读物制作、智能语音助手开发等。

Trae

Trae

字节跳动发布的AI编程神器IDE

Trae是一种自适应的集成开发环境(IDE),通过自动化和多元协作改变开发流程。利用Trae,团队能够更快速、精确地编写和部署代码,从而提高编程效率和项目交付速度。Trae具备上下文感知和代码自动完成功能,是提升开发效率的理想工具。

AI工具TraeAI IDE协作生产力转型热门
咔片PPT

咔片PPT

AI助力,做PPT更简单!

咔片是一款轻量化在线演示设计工具,借助 AI 技术,实现从内容生成到智能设计的一站式 PPT 制作服务。支持多种文档格式导入生成 PPT,提供海量模板、智能美化、素材替换等功能,适用于销售、教师、学生等各类人群,能高效制作出高品质 PPT,满足不同场景演示需求。

讯飞绘文

讯飞绘文

选题、配图、成文,一站式创作,让内容运营更高效

讯飞绘文,一个AI集成平台,支持写作、选题、配图、排版和发布。高效生成适用于各类媒体的定制内容,加速品牌传播,提升内容营销效果。

热门AI辅助写作AI工具讯飞绘文内容运营AI创作个性化文章多平台分发AI助手
材料星

材料星

专业的AI公文写作平台,公文写作神器

AI 材料星,专业的 AI 公文写作辅助平台,为体制内工作人员提供高效的公文写作解决方案。拥有海量公文文库、9 大核心 AI 功能,支持 30 + 文稿类型生成,助力快速完成领导讲话、工作总结、述职报告等材料,提升办公效率,是体制打工人的得力写作神器。

openai-agents-python

openai-agents-python

OpenAI Agents SDK,助力开发者便捷使用 OpenAI 相关功能。

openai-agents-python 是 OpenAI 推出的一款强大 Python SDK,它为开发者提供了与 OpenAI 模型交互的高效工具,支持工具调用、结果处理、追踪等功能,涵盖多种应用场景,如研究助手、财务研究等,能显著提升开发效率,让开发者更轻松地利用 OpenAI 的技术优势。

下拉加载更多