基于UE及iClone的数字人驱动
实习阶段性项目及学习成果报告
1. Introduction在基于应用软件Unreal Engine与iClone的数字人(MetaHuman)生成与驱动中,有两种解决方案:第一种是驱动iClone系列产品Character Creator自定义捏脸生成的character;第二种是驱动Unreal Engine系列产品MetaHuman Creator自定义捏脸生成的metahuman,两种方式各有优劣,当依据实际情况自行选择。
2. Live LinkLive Link作为联通Unreal Engine与iClone的桥梁插件,在整个过程中起到至关重要的作用。通过Live Link插件,可以实现Model Transfer、Model Synchronization的功能。
操作方式亦十分简单,将Live Link for Unreal插件下载好后分别导入当前UE项目及iClone软件中即可使用,之后于iClone中选定要Transfer / Link的对象,点击Transfer file / Activate Link按键后即可自动实现模型的传输。
3. Character ...
3D Human Reconstruction Notes
重建个自己的avatar放metaverse里面跑
Human Face Reconstruction ReferencePIFuPIFu分为single-view surface reconstruction及multi-view surface reconstruction,但是实际上multi-view surface reconstruction就是对多个single-view的一个整合(比如简单粗暴的取平均值之类的),故不多赘述。
PIFu,全称Pixel-Aligned Implicit Function,顾名思义,它与之前的做human digitalization的算法的不同之处在于两点,一个是Pixel-Aligned,一个是implicit function。关于pixel-aligned,之前的算法大多都是voxel-aligned,也就是将一个三维的数据,即voxel,放到model中训练,显然,这费时又费空间,而PIFu只先关注二维数据,再利用implicit function的优势,将深度参数$z(X)$放进隐式函数中求解。
首先声明一下implicit ...