MVHumanNet：大规模多视角日常穿着人体捕捉数据集（CVPR 2024）

项目主页 | 论文（Arxiv） | 数据集

作者：熊章阳#、李成宏#、刘肯坤#、廖宏杰、胡建桥、朱俊毅、宁书良、邱凌腾、王崇杰、王世杰、崔曙光和韩晓光*，来自GAP-Lab。

简介

MVHumanNet包含4,500个人体身份、9,000套日常服装、60,000个动作序列、6.45亿张带有广泛注释的图像，包括人体遮罩、相机参数、2D和3D关键点、SMPL/SMPLX参数以及相应的文本描述。

更新（MVHumanNet_Part1和MVHumanNet_Part2现已可用！）

2024.06.21：MVHumanNet_Part2已发布！ :fire::fire::fire::fire::fire::fire::fire:

我们提供了下载MVHumanNet数据的链接。请填写此表单以获取所有下载链接（无需填写之前的表单）。

目前，MVHumanNet_Part1和MVHumanNet_Part2共包含约4000个ID和8000套服装。剩余数据将在稍后更新到相同链接。
2024.05.29：下载MVHumanNet的脚本

我们提供了脚本以下载数据集的所有内容。使用前，请确保您已填写我们的表单并获得下载链接。
2024.05.24：MVHumanNet的文本描述已发布！文本描述:fire::fire::fire::fire::fire::fire::fire:
2024.05.07：MVHumanNet_Part1已发布！ :fire::fire::fire::fire::fire::fire::fire:

MVHumanNet_Part1包含约2500个ID和4800套服装。我们提供了下载MVHumanNet_Part1的链接。请填写表单以获取下载链接。
2023.12.20 MVHumanNet的样本现已可用！！！

这些样本包含100套服装，每套有6+1个动作序列。我们提供了下载样本的链接。请填写此表单以获取下载链接。

文件夹结构

|-- ROOT
    |-- outfits_ID # 100001
        |-- images    # 考虑到存储空间限制，我们将图像缩放到原始大小的一半，并遮蔽了一些背景。
            |-- camera_name
                |-- images  
            |-- camera_name
                |-- images
            ....
        |-- fmask   # 对应的遮罩。
            |-- camera_name
                |-- mask images 
            |-- camera_name
                |-- mask images 
            ....
        |-- annots # 通过openpose生成的2D图像注释。
            |-- camera_name
                |-- annotations  # json文件
            |-- camera_name
                |-- annotations  # json文件
            ....
        |-- openpose
            |-- camera_name
                |-- 2D keypoints  # json文件
            |-- camera_name
                |-- 2D keypoints  # json文件
            ....
        |-- smpl_param  # 从多视角图像优化得到
            |-- PKL文件
        |-- smplx  # 从多视角图像优化得到
            |-- 3D keypoints
                |-- json文件 # 3D关键点
            |-- smpl
                |-- json文件 
            |-- smplx_mesh  
                |-- obj文件  # smplx网格
        |-- camera_extrinsics.json   # 所有相机的外参
        |-- camera_intrinsics.json   # 所有相机的内参
        |-- camera_scale.pkl   #

如果您在研究中使用了我们的工作，请考虑引用：

@inproceedings{xiong2024mvhumannet,
  title={MVHumanNet: A Large-scale Dataset of Multi-view Daily Dressing Human Captures},
  author={Xiong, Zhangyang and Li, Chenghong and Liu, Kenkun and Liao, Hongjie and Hu, Jianqiao and Zhu, Junyi and Ning, Shuliang and Qiu, Lingteng and Wang, Chongjie and Wang, Shijie and others},
  booktitle={Proceedings of the IEEE/CVF Conference on Computer Vision and Pattern Recognition},
  pages={19801--19811},
  year={2024}
}