DreaMoving

DreaMoving：基于扩散模型的人物视频生成框架<br> 冯梦阳、刘金林、余凯、姚远、惠铮、郭燮帆、林贤辉、薛浩岚、石晨、李晓文、李奥杰、康晓阳、雷碧文、崔苗苗、任佩然、谢选松<br> 阿里巴巴智能计算研究院

<strong>简述</strong>：<strong>DreaMoving</strong>是一个基于扩散模型的可控视频生成框架，用于生成高质量的定制人物视频。

演示

中文版 ModelScope创空间

英文版 HuggingFace

<table border="0" cellspacing="0" cellpadding="0" align="center"> <tr> <td align="center" valign="middle"> <img src="https://yellow-cdn.veclightyear.com/835a84d5/004ad2d9-4db5-46c1-ae5d-1d4a95e0407f.gif"> </td> <td align="center" valign="middle"> <img src="https://yellow-cdn.veclightyear.com/835a84d5/d9574f9c-a3f4-4289-b84f-ec59cb1e3387.gif"> </td> <td align="center" valign="middle"> <img src="https://yellow-cdn.veclightyear.com/835a84d5/1ed5de42-2f4c-49c6-be85-ade5767fb3c7.gif"> </td> <td align="center" valign="middle"> <img src="https://yellow-cdn.veclightyear.com/835a84d5/f1e24174-4f16-466f-9821-37d3d5730f87.gif"> </td> <td align="center" valign="middle"> <img src="https://yellow-cdn.veclightyear.com/835a84d5/a0a6c8e6-8939-4f7a-b5dc-fc0c714859d9.gif"> </td> <td align="center" valign="middle"> <img src="https://yellow-cdn.veclightyear.com/835a84d5/76d906df-a670-4d6d-a604-629bf49ad066.gif"> </td> </tr> <tr> <td align="center" valign="middle" width="16%"> <p style="font-size: 14px;" align="center"> 一个微笑的女孩，穿着浅黄色长袖连衣裙，站在海边沙滩上。 </p> </td> <td align="center" valign="middle" width="16%"> <p style="font-size: 14px;" align="center"> 一个微笑的亚洲女孩，穿着长衬衫和长牛仔裤，在中央公园跳舞。 </p> </td> <td align="center" valign="middle" width="16%"> <p style="font-size: 14px;" align="center"> 一个微笑的女孩，穿着长袖外套，在秋天金黄树叶的公园里。 </p> </td> <td align="center" valign="middle" width="16%"> <p style="font-size: 14px;" align="center"> 一个男人，穿着蓝色领带的西装，在埃及金字塔前跳舞。 </p> </td> <td align="center" valign="middle" width="16%"> <p style="font-size: 14px;" align="center"> 一个微笑的女孩，穿着浅蓝色长裙，在法国小镇跳舞。 </p> </td> <td align="center" valign="middle" width="16%"> <p style="font-size: 14px;" align="center"> 一个微笑的女人，穿着白色上衣和长裤，在时代广场。 </p> </td> </tr> </table>

引用

@article{feng2023dreamoving,
    title={DreaMoving: A Human Video Generation Framework based on Diffusion Models},
    author={Mengyang Feng, Jinlin Liu, Kai Yu, Yuan Yao, Zheng Hui, Xiefan Guo, Xianhui Lin, Haolan Xue,
            Chen Shi, Xiaowen Li, Aojie Li, Xiaoyang Kang, Biwen Lei, Miaomiao Cui, Peiran Ren, Xuansong Xie},
    journal={arXiv},
    year={2023}
}