ZLUDA

ZLUDA

英特尔GPU上的高性能CUDA兼容层

ZLUDA项目为英特尔GPU提供CUDA兼容层,使未修改的CUDA应用能在英特尔显卡上运行。它支持英特尔UHD集成显卡和即将推出的Xe系列GPU。作为概念验证,ZLUDA目前主要适用于GeekBench等程序,性能与OpenCL代码相近。该项目无需代码移植即可使现有应用在英特尔GPU上运行,但目前仍处于早期开发阶段。

ZLUDACUDAIntel GPU性能替代方案Github开源项目

:warning: 重要 :warning:

发生了什么

之前在这里的代码已经应 AMD 的要求被撤下。 该代码是通过电子邮件获得 AMD 批准后发布的。AMD 法律部门现在表示这不具有法律约束力,因此进行了回滚。 在有人问之前:我没有收到任何来自 NVIDIA 的法律威胁或任何通信。

接下来

在这一点上,再多一个敌对公司也无关紧要。我计划从 AMD 之前的代码库开始重建 ZLUDA。该项目的资金正在筹集中,我希望能在未来几周内分享细节。它将有不同的范围,某些功能将不会回归。 我本想让它成为一个惊喜,但其中一个功能是支持 NVIDIA GameWorks。我在蝙蝠侠:阿卡姆骑士中成功实现了这一功能,但我从未完成它,现在这些代码将永远不会见天日:

设置ZLUDA 关闭ZLUDA 开启
图形设置ZLUDA 关闭ZLUDA 关闭

欢迎在这里讨论该主题



ZLUDA

ZLUDA 是一个用于 Intel GPU 的 CUDA 即插即用替代品。ZLUDA 允许在 Intel GPU 上运行未修改的 CUDA 应用程序,性能接近原生(详见下文)。它可以与当前集成的 Intel UHD GPU 一起使用,并将与未来的 Intel Xe GPU 一起使用

性能

ZLUDA 性能已在搭载 Intel UHD 630 的 GeekBench 5.2.3 上进行了测试。 一次测量使用 OpenCL 进行,另一次测量使用 CUDA 在 Intel GPU 上伪装成(相对较慢的) NVIDIA GPU,借助 ZLUDA 实现。两次测量使用相同的 GPU。

以下性能已归一化为 OpenCL 性能。110% 表示 ZLUDA 实现的 CUDA 在 Intel UHD 630 上快 10%。

性能图表

ZLUDA - Geekbench.com 上的详细结果

OpenCL - Geekbench.com 上的详细结果

总的来说,ZLUDA 在 GeekBench 中大约慢 2%。

结果解释

  • 为什么 ZLUDA 在某些基准测试中更快?
    这还没有精确地归因于某一个原因,但很可能是以下几个因素的综合:
    • ZLUDA 使用 Level 0,这通常是一个比 OpenCL 更低级、高性能的 API
    • 与前一点相关,目前 ZLUDA 不支持异步执行。这给了我们在 GeekBench 这样的基准测试中一个不公平的优势。GeekBench 专门使用 CUDA 同步 API
    • 有一组 GPU 指令在 NVIDIA 硬件和 Intel 硬件上都可用,但在 OpenCL 中没有暴露。我们正在比较针对 NVIDIA GPU 优化的代码与更通用的 OpenCL 代码。这是一个幸运的巧合(也归功于底层的 Intel Graphics Compiler),这些代码在 Intel GPU 上也能很好地工作
  • 为什么 OpenCL 在 Canny 和 Horizon Detection 中更快?
    CUDA 基准测试的作者使用了 CUDA 函数 atomicIncatomicDec,这些函数在 NVIDIA 卡上有直接的硬件支持,但在 Intel 卡上没有硬件支持。它们必须在软件中模拟,这限制了性能
  • 为什么 ZLUDA 在剩余的基准测试中较慢?
    原因未知。最有可能的是,在某些测试中我们从次优的 NVIDIA GPU 代码编译,而在其他测试中 ZLUDA 本身正在生成次优的 Intel GPU 代码。例如,SFFT 在 PR #22 之前甚至更慢

详情

  • ZLUDA 是 CUDA 的即插即用替代品吗?
    是的,但某些应用程序使用 CUDA 的方式使其与 ZLUDA 不兼容
  • 项目的状态如何?
    这个项目是一个概念验证。目前唯一能工作的就是 Geekbench。它极其有 bug 且不完整。你不应该依赖它做任何严肃的事情
  • 这是 Intel 的项目吗?是 NVIDIA 的项目吗?
    不,这是一个私人项目
  • 性能如何?
    性能可以接近类似编写的 OpenCL 代码的性能(见上一节的 GeekBench 结果)。NVIDIA GPU 和 Intel GPU 有不同的架构和功能集。因此,某些 NVIDIA 功能必须在 ZLUDA 中模拟,会有性能损失。此外,ZLUDA 的性能永远不会高于专门为 Intel GPU 优化的代码的性能
  • 它与 AMD HIP 或 Intel DPC++ 兼容性工具包有何不同?
    两者都是需要程序员努力将应用程序移植到相关 API 的移植工具包。使用 ZLUDA,现有应用程序可以在 Intel GPU 上"直接工作"(如果你幸运的话,ZLUDA 支持特定的 CUDA 子集)
  • 支持哪些 Intel GPU?
    Intel Gen9 及更新版本(Skylake 及更新版本),这些版本受 Intel Level 0 支持
  • ZLUDA 支持 AMD GPU 吗?
    目前肯定不支持,但从技术上讲可能是可行的

使用方法

警告:这是一个非常不完整的概念验证。它可能无法与你的应用程序一起工作。ZLUDA 目前只能与使用 CUDA Driver API 或静态链接的 CUDA Runtime API 的应用程序一起工作 - 完全不支持动态链接的 CUDA Runtime API

Windows

你应该安装最新的 Intel GPU 驱动程序。
像这样运行你的应用程序:

<ZLUDA_DIRECTORY>\zluda_with.exe -- <APPLICATION> <APPLICATIONS_ARGUMENTS>

Linux

你应该按照这里的说明安装最新的运行时驱动程序包: https://dgpu-docs.intel.com/installation-guides/index.html。
像这样运行你的应用程序:

LD_LIBRARY_PATH=<ZLUDA_DIRECTORY> <APPLICATION> <APPLICATIONS_ARGUMENTS>

构建

你应该安装相对较新版本的 Rust,然后只需在项目的主目录中执行:

cargo build --release

Linux

你应该按照这里的说明安装最新的运行时和开发者驱动程序包: https://dgpu-docs.intel.com/installation-guides/index.html。此外,你还应该安装 ocl-icd-opencl-dev(或等效包)。
如果你在 Linux 上构建,ZLUDA 构建完成后还必须为 ZLUDA 输出二进制文件创建符号链接(或重命名):

ln -s libnvcuda.so target/release/libcuda.so
ln -s libnvcuda.so target/release/libcuda.so.1
ln -s libnvml.so target/release/libnvidia-ml.so

贡献

如果你想开发 ZLUDA 本身,请阅读 CONTRIBUTING.md,其中包含如何设置依赖项和运行测试的说明

许可证

本软件采用 Apache 2.0 许可证或 MIT 许可证双重许可。详情请参阅 LICENSE-APACHELICENSE-MIT

编辑推荐精选

Keevx

Keevx

AI数字人视频创作平台

Keevx 一款开箱即用的AI数字人视频创作平台,广泛适用于电商广告、企业培训与社媒宣传,让全球企业与个人创作者无需拍摄剪辑,就能快速生成多语言、高质量的专业视频。

即梦AI

即梦AI

一站式AI创作平台

提供 AI 驱动的图片、视频生成及数字人等功能,助力创意创作

扣子-AI办公

扣子-AI办公

AI办公助手,复杂任务高效处理

AI办公助手,复杂任务高效处理。办公效率低?扣子空间AI助手支持播客生成、PPT制作、网页开发及报告写作,覆盖科研、商业、舆情等领域的专家Agent 7x24小时响应,生活工作无缝切换,提升50%效率!

TRAE编程

TRAE编程

AI辅助编程,代码自动修复

Trae是一种自适应的集成开发环境(IDE),通过自动化和多元协作改变开发流程。利用Trae,团队能够更快速、精确地编写和部署代码,从而提高编程效率和项目交付速度。Trae具备上下文感知和代码自动完成功能,是提升开发效率的理想工具。

AI工具TraeAI IDE协作生产力转型热门
蛙蛙写作

蛙蛙写作

AI小说写作助手,一站式润色、改写、扩写

蛙蛙写作—国内先进的AI写作平台,涵盖小说、学术、社交媒体等多场景。提供续写、改写、润色等功能,助力创作者高效优化写作流程。界面简洁,功能全面,适合各类写作者提升内容品质和工作效率。

AI辅助写作AI工具蛙蛙写作AI写作工具学术助手办公助手营销助手AI助手
问小白

问小白

全能AI智能助手,随时解答生活与工作的多样问题

问小白,由元石科技研发的AI智能助手,快速准确地解答各种生活和工作问题,包括但不限于搜索、规划和社交互动,帮助用户在日常生活中提高效率,轻松管理个人事务。

热门AI助手AI对话AI工具聊天机器人
Transly

Transly

实时语音翻译/同声传译工具

Transly是一个多场景的AI大语言模型驱动的同声传译、专业翻译助手,它拥有超精准的音频识别翻译能力,几乎零延迟的使用体验和支持多国语言可以让你带它走遍全球,无论你是留学生、商务人士、韩剧美剧爱好者,还是出国游玩、多国会议、跨国追星等等,都可以满足你所有需要同传的场景需求,线上线下通用,扫除语言障碍,让全世界的语言交流不再有国界。

讯飞智文

讯飞智文

一键生成PPT和Word,让学习生活更轻松

讯飞智文是一个利用 AI 技术的项目,能够帮助用户生成 PPT 以及各类文档。无论是商业领域的市场分析报告、年度目标制定,还是学生群体的职业生涯规划、实习避坑指南,亦或是活动策划、旅游攻略等内容,它都能提供支持,帮助用户精准表达,轻松呈现各种信息。

AI办公办公工具AI工具讯飞智文AI在线生成PPTAI撰写助手多语种文档生成AI自动配图热门
讯飞星火

讯飞星火

深度推理能力全新升级,全面对标OpenAI o1

科大讯飞的星火大模型,支持语言理解、知识问答和文本创作等多功能,适用于多种文件和业务场景,提升办公和日常生活的效率。讯飞星火是一个提供丰富智能服务的平台,涵盖科技资讯、图像创作、写作辅助、编程解答、科研文献解读等功能,能为不同需求的用户提供便捷高效的帮助,助力用户轻松获取信息、解决问题,满足多样化使用场景。

热门AI开发模型训练AI工具讯飞星火大模型智能问答内容创作多语种支持智慧生活
Spark-TTS

Spark-TTS

一种基于大语言模型的高效单流解耦语音令牌文本到语音合成模型

Spark-TTS 是一个基于 PyTorch 的开源文本到语音合成项目,由多个知名机构联合参与。该项目提供了高效的 LLM(大语言模型)驱动的语音合成方案,支持语音克隆和语音创建功能,可通过命令行界面(CLI)和 Web UI 两种方式使用。用户可以根据需求调整语音的性别、音高、速度等参数,生成高质量的语音。该项目适用于多种场景,如有声读物制作、智能语音助手开发等。

下拉加载更多