CDC夜校回顾NO.11|单张照片3D人脸重建、大概是一起来探讨影视镜头语言与故事编排吧、Sketch 解析背后的秘密


CDC夜校回顾NO.11|单张照片3D人脸重建、大概是一起来探讨影视镜头语言与故事编排吧、Sketch 解析背后的秘密

关于CDC夜校

关键词|专业 · 跨界 · 探索 · 成长

CDC 被称为用户体验设计界的“黄埔军校”,与我们不断求真求精求专的态度及多种学习成长措施有着密切的关联。CDC夜校至今已持续近10年,夜校题材不仅覆盖用户研究、品牌设计、体验设计、研发技术等专业还涉及生活时尚、建筑艺术、摄影等多个跨界领域,是我们沉淀、分享、专业成长的重要形式之一;也能让不同专业的伙伴灵活轻松的获得跨领域前沿题材学习与切磋机会,共同拓展知识边界,高质成长

CDC夜校回顾NO.11|单张照片3D人脸重建、大概是一起来探讨影视镜头语言与故事编排吧、Sketch 解析背后的秘密

CDC夜校回顾NO.11|单张照片3D人脸重建、大概是一起来探讨影视镜头语言与故事编排吧、Sketch 解析背后的秘密

《单张照片3D人脸重建》

陈雅静

 腾讯AI Lab/研究员

CDC夜校回顾NO.11|单张照片3D人脸重建、大概是一起来探讨影视镜头语言与故事编排吧、Sketch 解析背后的秘密腾讯CDC夜校分享现场

基于照片的三维人脸重建是一个很有挑战性的研究课题。从二维图片生成三维人脸存在的困难有很多,包括二维信息估计三维模型的不确定性,以及人脸形状、纹理、姿势、光照的高度耦合,都使得这个问题很难获得最优解。近年来研究人员一直在探索更好地解决这个问题的办法,目前已经有一些对应的落地商用产品。
研究的目标是基于单张的照片,重建出形状神似,纹理清晰且逼真的三维人脸。在介绍具体算法之前,首先介绍了一些相关背景知识,包括三维人脸的构成,投影方式,以及3DMM,然后由浅入深地介绍了形状和纹理重建的前沿算法。目前的研究主流还是集中在3DMM的拟合上,通过加入关键点,图像RGB以及人脸识别相关的约束,可以把三维人脸重建得比较神似。还有一些研究是针对细节的,包括形状和纹理的细节重建,他们会更依赖于图像信息。形状细节重建常用的思路是coarse-to-fine的思想,先重建大体的三维模型,再在这个基础上,加入图像中呈现的中频和高频信息。纹理高清合成常用超分辨率的方案,但是这些方案没有办法还原局部的毛发和毛孔细节,所以我们提出使用局部PCA基和细节增强网络结合的方法,使得重建纹理更逼真。
总结一下,目前研究人员还在积极探索基于照片的三维人脸重建的方案,鲁棒性和效果在近几年都有了很大提升。相信不久的将来,三维人脸重建技术会快速普及,并且为娱乐和媒体产业的创作注入新的血液。

▼点击观看现场视频

CDC夜校回顾NO.11|单张照片3D人脸重建、大概是一起来探讨影视镜头语言与故事编排吧、Sketch 解析背后的秘密

一起来探讨影视镜头语言与故事编排吧

林巧峰

CDC 品牌设计中心/多媒体高级设计

CDC夜校回顾NO.11|单张照片3D人脸重建、大概是一起来探讨影视镜头语言与故事编排吧、Sketch 解析背后的秘密

腾讯CDC夜校分享现场

视频是一种信息传递的媒介,而这种媒介我们常用于故事的分享与传递。
现代故事影片,已经有一套成熟的画面表达语言。Rocca为我们介绍了如何利用构图传递故事的客观状态:人物、地点、事件以及角色之间的关系与情绪。而使用起来就像咏春一样,核心掌握只有“三板斧”:镜头位置、角色方向、镜头角度,灵活运用,足以“招呼”各式的视频创作挑战了。
内容方面,Rocca还以分析电影“钢铁侠”为例,认为好的故事都应该围绕着角色“成长”而发展,因此好的角色设定是故事创作的核心。当有了有趣味的人设,角色会围绕着原始人性:面对“死亡”、“情感”、“欲望”而发生的冲突,让人关注、共鸣和认可的。故事叙述角色接连解决这些一次次发生的冲突,它们都是角色成长的重要基石,至于最终的结局是否达到角色任务目标已经不重要了,人们想看到的其实是角色已经获得了他们所认可的成长蜕变。
Rocca也用一句话总结他的创作经验“生活中所有的逆袭,都是最好的故事样本“,我们的创作虽可夸张,但不能偏离心中那片真实。希望和大家一起挖掘”生活中的好作品“。

注:此课程仅做内部分享,分享视频暂不对外公开。

CDC夜校回顾NO.11|单张照片3D人脸重建、大概是一起来探讨影视镜头语言与故事编排吧、Sketch 解析背后的秘密

工欲善其事,必先利其器—

Sketch 解析背后的秘密

朱辉
CDC 设计研发中心/ 高级工程师

CDC夜校回顾NO.11|单张照片3D人脸重建、大概是一起来探讨影视镜头语言与故事编排吧、Sketch 解析背后的秘密

腾讯CDC夜校分享现场

大部分的场景下,设计师做好设计稿之后想进行下一步的交付,都会直接导出 PDF、图片或者带标注的压缩包。但是在这个过程中,如果有内容更新,原来交付内容就失效了。需要设计师重复的新导出一份最新的文件。直接发送设计稿源文件又会因为交付的目标用户没有对应的 macOS 设备或者 Sketch 软件而没办法正常查看。

虽然这个问题可以用我们设计协作平台解决,但是设计协作平台对于设计师的操作还是一个主动的行为,并且不适用于所有的应用场景。所以我们尝试对 Sketch 的源文件进行解构,实现不依赖 macOS 和 Sketch 软件来预览设计稿的方案。

在 Sketch 中,可以创建像形状(包括正方形、圆形等)、字符、图像这几种基本元素。在这个元素的基础上我们可以给他设置样式,比如他的 x、y 轴坐标,尺寸大小,颜色,边框等等。多个元素之间还可以进行组合运算,比如取并集、取交集、取差集。最后得到我们最终的图层。而这些关键信息都保存在 sketch 源文件的 JSON 数据中,我们只要按照这些数据将设计稿重新渲染出来即可。

但是在实现解析渲染的过程中也遇到了像字体缺失、性能较差以及很多未知错误的问题等。

通过实现 sketch 设计稿的解析能力,可以做更多的延展:提供 BaaS 的云服务,实现在网盘、通讯软件以及文档中直接预览设计稿;对比源文件内的数据进行设计稿的版本管理和增量更新;支持更多的设计稿格式和在线编辑的能力。

注:此课程仅做内部分享,分享视频暂不对外公开。


  下期CDC夜校将在10月末进行,敬请期待  


CDC夜校回顾NO.11|单张照片3D人脸重建、大概是一起来探讨影视镜头语言与故事编排吧、Sketch 解析背后的秘密




快乐工作,快乐生活

Happy work , Happy life


/


Join us


CDC夜校回顾NO.11|单张照片3D人脸重建、大概是一起来探讨影视镜头语言与故事编排吧、Sketch 解析背后的秘密




本篇文章来源于微信公众号: 腾讯CDC体验设计

UI/UX

《为用户代“研”》用研主题沙龙

2020-10-14 16:59:40

UI/UX

体验与商业的左右互搏:构建房产交易服务平台的信任设计

2020-10-15 15:24:42

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索