YaBoSports：日活超1.6亿，揭秘快手背后的 AI 技术

快手技术团队通过 2D 的 RGB 视觉信息对问题进行建模、求解，获得人脸关键点以及实时重建的三维模型，并把 1D、2D 和 3D 三种不同模态的信息进行建模对齐，求解出人脸的表情，驱动虚拟形象做各种逼真的动作。同时，得益于深度神经网络模型的量化，通过压缩和加速解决手机性能问题，该方案可适配任意机型。

高质量渲染萌面效果的最终呈现离不开渲染，为了获得高质量的渲染，快手技术团队采用了先进的 PBR 技术，在移动端实现了 PC 游戏级画质；同时，依托深厚的 AI 技术积累，萌面能够根据外部环境和用户的形象特征智能化地选择最适合用户的材质，达到最优的渲染效果。

为了获得更加真实的体验效果，快手技术团队引入了物理引擎实现头发、布料等柔体的运动效果。为了使用户获得最优的体验，渲染引擎会根据不同机型选择合适的渲染质量。

移动端预测模型优化为了让 AI 模型在手机端能够流畅地运行，快手技术团队主要做了三方面的优化：

首先，在图像预处理环节，将图像各种预处理操作合并起来，并对预处理所涉及到的图像内存进行统一分配和回收，以减少内存资源的消耗，提高分配使用的效率；其次，充分利用 NEON 加速以及苹果自带的 accelerate 加速，使得整个运行库只占用 2M 的空间；最后，在保证预测精度的前提下，对 AI 模型进行局部的 INT8 量化，经过优化后，运行速度可提高 1 倍以上，同时 AI 预测模型的占用空间也压缩到将近原来的四分之一。以上就是「萌面 Kmoji」魔法表情使用的 AI 技术。除了虚拟形象之外，基于萌面所使用的这套系统，快手技术团体还进行了扩展应用：「人像 3D 打光」、「世界上另一个你」。雷锋网认为，「世界上另一个你」这个功能特别有创意，通过分析用户的脸部数据，找出快手用户中哪些人长相和当前用户非常像。在快手总部，雷锋网编辑现场体验了一下，找出来的人在长相上和本人在五官、发型和脸型等方面极其相似，甚至就是「世界上另一个我」。期待快手在 AI 技术上继续发力，为我们创造出更多好玩的功能。