作为抖音设计中心脑洞大开的部门，我们的多媒体设计师们都在干些什么？我们一起来看看吧。
我们从人脸识别、肢体识别、场景AR识别等方面进行不同的维度的观察和思考，通过设计一些新鲜有趣的创意互动玩法来丰富大家的日常拍摄，让视频更有意思。
首先从人脸识别出发，除了大家熟知的美妆滤镜等，我们想要挖掘基于人脸识别，更加深层有趣的互动玩法。
变身漫画——全球首发的实时真人漫画效果
二次元的美好是我们一直向往的，如何能让抖音用户都进入到二次元里呢？
I.突破「次元壁」的关键技术
打破二次元和三次元的关键技术，就是GAN (Generative adversarial network 对抗生成网络)。简单说，就是将人脸照片转化成如同手绘版的卡通图。
这项任务存在着巨大挑战：真实和卡通人脸的结构属于两个不同的领域。如果没有明确的对应关系，很难捕捉到面部特征，生成高质量卡通图片。这就需要对机器进行大量的训练。
其次，算法在建立绘制风格时，需要大量的图片作为数据来学习。说到漫画二次元，大家马上想到的就是日本漫画。在风格定位中，我们采用了日漫中最常见的赛璐璐画法，设计师们绘制多个漫画版本效果，甚至建立起了日漫的五官素材库。
训练AI的图，都是设计师一笔笔画出来的，批量产出成对图像数据，这个图像的质量直接影响了模型的学习效果，所以设计师们在过程中要不停的调整和优化。为达到千人千面的效果，对常规的日漫五官比例做了弱化，保留了漫画效果的大眼萌感。
当然仅生成图片还不够，我们还要让效果变成实时的，技术、设计团队通过效果+性能的双赛道冲刺，利用GAN+轻量化模型的混合迭代，实现全球首发的高精实时真人漫画。对技术的探索，有突破性意义。
变身漫画一上线就成为现象级爆款。一夜亿万曝光，道具上线3天获得了1000w+的视频投稿，贡献大量相关热门话题。让用户成功的变身为二次元主角。
除了面部识别，全身场景是继人脸场景之外的另一个重要场景拓展。我们期望通过设计一系列的创新玩法能够在该场景下不断探索，从而将互动延展至更多的场景，帮助用户拍摄更加丰富的内容。
体感游戏——打造有趣的线上健身新方式
疫情期间全民在家不能随意外出，我们想通过特效小游戏的方式，让用户在家也能够达到运动健身的目的。在移动端，我们实现了人体骨骼点识别与 2D 物理引擎的技术结合。上线了一系列好玩有趣的体感游戏。
其中「马步救球球」这个游戏的初始灵感来自于中国传统艺术杂技顶缸，杂技演员需要在极小的接触面上保持平衡，这项艺术有着较高的技术挑战性，同时兼具较高的观赏性。
我们把这项艺术数字化，游戏规则是用户在头部出现一个平衡杆及小球，需要尽可能在规定时间内，使用马步姿势保持头顶平衡不让球掉落，同时不让屏幕中掉落的病毒触碰到球，这样既能让用户活动活动筋骨，还具备很好的观赏性。
「躲避病毒」游戏玩法本身希望以一种轻松的模式，让用户达到运动目的。游戏的规则是需要快速移动身体不让头部接触到病毒，躲避病毒的侵袭，整个玩法非常简单易操作，而且运动量非常大。
除了人脸和肢体的识别玩法，AR与线下场景的结合联动也是我们一直在探索的事。推动抖音在更多元、丰富场景下的渗透能力。
恐龙世界——身临其境的AR场景效果
基于场景识别的「恐龙世界」是通过利用天空识别+建筑分割的算法技术，以天空为画布，让远古的恐龙世界出现在你的摄像头中，呈现出震撼大片的既视感。
恐龙经过设计师细致的打磨栩栩如生，360度无缝衔接的天空场景，增强了远古时期的代入感。我们想用AR 的方式让每个人都可以和美好生活完成有趣、有价值的结合。
除此之外，我们还做了更多有趣的道具
I.装饰类
日常拍摄的使用场景中，美妆算是一个基础且重要的门类，而在此基础上衍生出的各类风格化的妆容，为用户提供了丰富的选择。
II.变形类
五官3d形变和抠脸玩法。以用户脸部作为基础，进行了夸张搞怪的变形效果处理，用这种吸睛且富有活力的表达方式，让大家在使用道具过程中发现另一个“奇妙”的自己！
III.贴纸
为了帮助用户更好的编辑视频的，我们还做了符合各种用户画像的贴纸、模版等，帮助用户轻松表达更多的内容。（以下图片来源自网络）
如果你活力满满脑洞大，总有奇思妙想，快来抖音，让更多人看到你的创意，和我们一起创造快乐！抖音设计中心期待你的加入。快把简历砸过来吧！
本篇文章来源于微信公众号:抖音设计中心
