Project Introduction

项目概况

项目题目
基于RGBD序列的动态物体几何与纹理重建及其数据集建设

什么是动态重建
动态重建是在物体运动过程中重建物体的几何和纹理信息的技术,包括:

  • 三维重建(获取三维信息)
  • 运动重建(获取动态信息)
  • 分析与合成(分析姿态、属性,合成新的形象)

研究成果

发表论文

  • Spatially constrained level-set tracking and segmentation of non-rigid objects, Xuan Cheng, Ming Zeng, and Xinguo Liu. JVCIR, 2016. (SCI)
  • Video segmentation with L0 gradient minimization, Xuan Cheng, Yuanli Feng, Ming Zeng, Xinguo Liu, Computers & Graphics, 2016. (SCI)
  • Estimation of human body shape and cloth field in front of a kinect, Ming Zeng,Liujuan Cao, Huailin Dong, Kunhui Lin, Meihong Wang, Jing Tong, Neurocomputing, 2015. (SCI)
  • Shape completion for depth image via repeated objects registration, Ming Zeng, Liujuan Cao, Xuan Cheng, Kunhui Lin, Huailin Dong, Cheng Wang, Neurocomputing, 2015. (SCI)
  • 球面深度全景图表示下的三维形状识别, 冯元力,夏梦,季鹏磊,周潇,曾鸣,刘新国, 计算机辅助设计与图形学学报,2017. (EI)
  • Joint analysis of shapes and images via deep domain adaptation, Zizhao Wu, Yunhui Zhang, Ming Zeng, Feiwei Qin, Yigang Wang, Computers & Graphics, 2017. (SCI)

系统与数据集

本研究组开发了一套基于单反相机阵列的数据采集与重建的软硬件系统。我们将12个单反相机按角度均匀放置在被采集物体周围360度的环上(图5为系统实拍图)。我们设计并制作了硬件同步电路,同时实现了相机远程拍摄的功能。相机同步精度能达到1毫秒。基于此套系统,我们采集了50组高清人脸表情多视图数据,用于进一步算法研究。

system dataset

 

应用领域

成果主要应用领域包括:人体重建与体形估计、人机交互、虚拟试戴、运动捕捉、虚拟形象合成、三维人脸识别、动画合成等,具体案例如下图所示。

applications

 

Leave a Reply