人脸tracking&mapping的应用与技术发展
发布时间:2022年01月27日 来源:易倍体育-易倍中国有限公司官网 浏览量:573

      早期人脸3D mapping与建筑3dmapping的实现技术无异,都是静态或动态图像mapping的3D物体上的技术,基于这种简单的技术,艺术家仍然拓展了其艺术表现的边界。该项技术常被应用在艺术展览上,比如杜莎夫人蜡像馆的蜡像动态化展示。

       近几年,借助机器视觉、光学追踪、创新的投影设备,这项技术已经能够实现对真实人脸的动态追踪投影,进一步拓展了其在各领域的应用。

       2015年,法国数字艺术公司BK在Golem项目的旗帜下开始了一系列被称为"augmented uncanny sculptures"的投影地图作品。这个概念将移动的面孔投射到画廊背景中的经典雕塑上。其结果是一种奇怪的、令人不安但令人兴奋的新旧艺术融合,通过微妙的视频投影将这些静止的人物变得栩栩如生。

 

 

     

       纳什维尔杜莎夫人蜡像馆是田纳西州梅林中途岛以音乐为主题的蜡像馆,曾开展过生动的蜡像展览,也是第一家3D投影映射技术与蜡像相结合的杜莎夫人蜡像馆。

       该展览将一张脸的数字动画投影到Darius Rucker的蜡像上。面部投影技术使蜡像脸部栩栩如生复杂的投影图像使它看起来像是静止的蜡像在跟你说话。

 

 

      

       Darius Rucker说:“在杜莎夫人蜡像馆的旅程中,我拥有了自己的蜡像经历了整个3Dmapping制作过程,这让我觉得自己作为一名艺术家真的达到了一个新的水平。”。“当客人参观景点时,我会觉得我真的在那里,因为这项很酷的技术。我非常希望粉丝们能来看看。

 

        蜡像制作

        头像建模

 

       UV展开和视频制作

       3Dmapping投影到蜡像上

 

 

     

       同样的技术在《CAT,猫女上的应用

       纽约杜莎夫人蜡像馆最近展示了它的最新作品:Grizabella,流行音乐《猫》中的魅力猫。不过,格里扎贝拉并不是一个普通的、眼睛空白的蜡像。得益于尖端的投影贴图和8K摄像头技术,这只会唱歌的猫的脸会移动、微笑和扭曲。

 

      

       西班牙丝芙兰公司(Sephora Spain)为推出新的Kat Von D美容化妆品系列,聘请了互动体验机构Wildbytes,制作一个身临其境的投影Dmapping有史以来第一次实施实时人脸投影映射性能,展示了实时人脸跟踪技术的威力。 

 

 

 

 

 

 

 

 

      

       Show用到的视频内容创作。Cinema 4D的MoGraph工具在其中三部动画中特别有用。扫描序列中使用了MoGraph的继承效应器,当合成线框在面部移动时,将其转换为3D效果,然后从鼻子向外扩散。当使用Cel渲染器作为后期效果渲染时,创建了一个复杂的图案。

 

 

 

        模型与最后的内容映射。

 

 

      脸部marker与Optitrack摄像机

      该剧由凯特·冯·德执导,她用化妆技术将自己的脸打造成完美的投影白板。通过光学标记点和光学追踪技术,投影系统实施追踪脸部的位置,并将花朵、蝴蝶等艺术造型准确地投影到脸部设计的位置。一个弦乐四重奏还现场演奏了一首定制的音乐作品。

 

      “人脸映射是一种将动态图像投影到活人脸上的新技术,将人脸的自然表情和表现力作为最终结果的一部分,并加以利用,这与化妆艺术类似,化妆艺术已有数千年的历史。”--- Asai

 

------浙江易倍体育-易倍中国有限公司官网有限公司运用三维场景模拟,空间定位以及光学动捕,自动融合显示计算,特效合成编辑、特效逻辑编辑等技术,以专业文化娱乐行业为主要深耕方向,为客户提供动态投影映射、灯光以及视频内容追踪、视频内容互动、舞台创意集成在内的各类舞台创意视觉及音频易倍体育-易倍中国有限公司官网。