EigenGAN-Tensorflow

EigenGAN-Tensorflow

层级特征分解的生成对抗网络框架

EigenGAN-Tensorflow是一个基于TensorFlow实现的生成对抗网络框架,采用层级特征分解方法。该项目提供CelebA和Anime数据集的训练测试代码,可生成和操控高质量人脸与动漫图像。通过特征分解实现图像属性的无监督学习和精确控制,支持多GPU训练,并提供预训练模型。此开源项目为GAN研究和开发提供了实用工具。

EigenGAN生成对抗网络图像属性编辑无监督学习人脸生成Github开源项目
性别刘海身体朝向姿势(偏航)
<img src="https://yellow-cdn.veclightyear.com/0a4dffa0/434fd27e-368f-4495-8fea-fb18c84e3a4f.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/9bca18b3-b3d6-4369-b45e-e2a7c2e9a869.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/5d24e6c6-d4fb-47eb-bf41-e9fe6662f60e.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/8e0da438-fae9-4923-968a-9bf7659495fe.gif" width="200">
光照微笑脸型唇膏颜色
<img src="https://yellow-cdn.veclightyear.com/0a4dffa0/36726402-1b6a-43e3-9d89-b2e9ae5d37b3.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/1c033289-62b7-4912-914b-c3c51f577ae1.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/97c81777-5825-425a-be9b-fc4749530aab.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/61f81de3-a544-4db8-b11b-83c202cb26ce.gif" width="200">
绘画风格姿势(偏航)姿势(俯仰)缩放和旋转
<img src="https://yellow-cdn.veclightyear.com/0a4dffa0/ed051169-daf0-413d-b251-af85073c4eb8.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/dde8015a-4061-4d6c-a166-75fcb3b3b040.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/55b65048-2f3c-495d-9a18-5f47bb825ee8.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/89469c0d-a707-4367-ac8b-bcc0b0610d77.gif" width="200">
脸红和眼睛颜色嘴型发色色调(橙-蓝)
<img src="https://yellow-cdn.veclightyear.com/0a4dffa0/3b1d4919-5e42-49ad-8628-73196cedc345.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/02083214-2c9e-45c0-9287-2139f0905887.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/7332453b-8424-4d2a-8b2a-977ab74b3d8b.gif" width="200"><img src="https://yellow-cdn.veclightyear.com/0a4dffa0/055cec28-fc9e-42af-9492-2cf4a5330dc5.gif" width="200">

[更多无监督学习的维度](https://github.com/LynnHo/EigenGAN-Tensorflow/blob/main/./results.md

<p align="center"> EigenGAN (ICCV 2021) <br> <sub> 视频 </sub> </br> </p>

  • EigenGAN: GANs的分层特征学习TensorFlow实现

  • 架构图

    <p align="center"> <img src="https://yellow-cdn.veclightyear.com/0a4dffa0/5475a5b6-5e08-4ad2-8387-e9e4eae1ad91.svg" width="100%" /> </p>
  • 流形视角

    <p align="center"> <img src="https://yellow-cdn.veclightyear.com/0a4dffa0/84cb06a7-6c2c-48ed-8938-4f5d09d236bc.svg" width="100%" /> </p>

使用方法

  • 环境要求

    • Python 3.6

    • TensorFlow 1.15

    • OpenCV, scikit-image, tqdm, oyaml

  • 我们推荐使用 AnacondaMiniconda,然后你可以使用以下命令创建环境

conda create -n EigenGAN python=3.6 source activate EigenGAN conda install opencv scikit-image tqdm tensorflow-gpu=1.15 conda install -c conda-forge oyaml
  • 注意:如果你创建了一个新的conda环境,记得在执行任何其他命令之前先激活它
source activate EigenGAN
  • 数据准备

    • CelebA-未对齐 (10.2GB,质量比对齐数据更高)

      • 下载数据集

        • img_celeba.7z (移动到 ./data/img_celeba/img_celeba.7z): Google Drive百度网盘 (密码 rp0s)

        • annotations.zip (移动到 ./data/img_celeba/annotations.zip): Google Drive

      • 解压缩并处理数据

        7z x ./data/img_celeba/img_celeba.7z/img_celeba.7z.001 -o./data/img_celeba/ unzip ./data/img_celeba/annotations.zip -d ./data/img_celeba/ python ./scripts/align.py
    • 动漫

      • 下载数据集

        mkdir -p ./data/anime rsync --verbose --recursive rsync://176.9.41.242:873/biggan/portraits/ ./data/anime/original_imgs
      • 处理数据

        python ./scripts/remove_black_edge.py
  • 运行(支持多GPU)

    • 在CelebA上训练

      CUDA_VISIBLE_DEVICES=0,1 \ python train.py \ --img_dir ./data/img_celeba/aligned/align_size(572,572)_move(0.250,0.000)_face_factor(0.450)_jpg/data \ --experiment_name CelebA
    • 在动漫数据集上训练

      CUDA_VISIBLE_DEVICES=0,1 \ python train.py \ --img_dir ./data/anime/remove_black_edge_imgs \ --experiment_name Anime
    • 测试

      CUDA_VISIBLE_DEVICES=0 \ python test_traversal_all_dims.py \ --experiment_name CelebA
    • 损失可视化

      CUDA_VISIBLE_DEVICES='' \ tensorboard \ --logdir ./output/CelebA/summaries \ --port 6006
  • 使用训练好的权重

    • 训练好的权重(移动到 ./output/*.zip

    • 解压文件(以CelebA.zip为例)

      unzip ./output/CelebA.zip -d ./output/
    • 测试(见上文)

引用

如果你在研究中发现 EigenGAN 有用,请考虑引用:

@inproceedings{he2021eigengan,
  title={EigenGAN: Layer-Wise Eigen-Learning for GANs},
  author={He, Zhenliang and Kan, Meina and Shan, Shiguang},
  booktitle={International Conference on Computer Vision (ICCV)},
  year={2021}
}

编辑推荐精选

Vora

Vora

免费创建高清无水印Sora视频

Vora是一个免费创建高清无水印Sora视频的AI工具

Refly.AI

Refly.AI

最适合小白的AI自动化工作流平台

无需编码,轻松生成可复用、可变现的AI自动化工作流

酷表ChatExcel

酷表ChatExcel

大模型驱动的Excel数据处理工具

基于大模型交互的表格处理系统,允许用户通过对话方式完成数据整理和可视化分析。系统采用机器学习算法解析用户指令,自动执行排序、公式计算和数据透视等操作,支持多种文件格式导入导出。数据处理响应速度保持在0.8秒以内,支持超过100万行数据的即时分析。

AI工具使用教程AI营销产品酷表ChatExcelAI智能客服
TRAE编程

TRAE编程

AI辅助编程,代码自动修复

Trae是一种自适应的集成开发环境(IDE),通过自动化和多元协作改变开发流程。利用Trae,团队能够更快速、精确地编写和部署代码,从而提高编程效率和项目交付速度。Trae具备上下文感知和代码自动完成功能,是提升开发效率的理想工具。

热门AI工具生产力协作转型TraeAI IDE
AIWritePaper论文写作

AIWritePaper论文写作

AI论文写作指导平台

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

数据安全AI助手热门AI工具AI辅助写作AI论文工具论文写作智能生成大纲
博思AIPPT

博思AIPPT

AI一键生成PPT,就用博思AIPPT!

博思AIPPT,新一代的AI生成PPT平台,支持智能生成PPT、AI美化PPT、文本&链接生成PPT、导入Word/PDF/Markdown文档生成PPT等,内置海量精美PPT模板,涵盖商务、教育、科技等不同风格,同时针对每个页面提供多种版式,一键自适应切换,完美适配各种办公场景。

热门AI工具AI办公办公工具智能排版AI生成PPT博思AIPPT海量精品模板AI创作
潮际好麦

潮际好麦

AI赋能电商视觉革命,一站式智能商拍平台

潮际好麦深耕服装行业,是国内AI试衣效果最好的软件。使用先进AIGC能力为电商卖家批量提供优质的、低成本的商拍图。合作品牌有Shein、Lazada、安踏、百丽等65个国内外头部品牌,以及国内10万+淘宝、天猫、京东等主流平台的品牌商家,为卖家节省将近85%的出图成本,提升约3倍出图效率,让品牌能够快速上架。

iTerms

iTerms

企业专属的AI法律顾问

iTerms是法大大集团旗下法律子品牌,基于最先进的大语言模型(LLM)、专业的法律知识库和强大的智能体架构,帮助企业扫清合规障碍,筑牢风控防线,成为您企业专属的AI法律顾问。

SimilarWeb流量提升

SimilarWeb流量提升

稳定高效的流量提升解决方案,助力品牌曝光

稳定高效的流量提升解决方案,助力品牌曝光

Sora2视频免费生成

Sora2视频免费生成

最新版Sora2模型免费使用,一键生成无水印视频

最新版Sora2模型免费使用,一键生成无水印视频

下拉加载更多