快手对外透露AI实力！短视频运营的四大环节大揭秘

2018-11-02 20:18 来源:智东西 开发 /快手 /视频

原标题：快手对外透露AI实力！短视频运营的四大环节大揭秘

智东西（公众号：zhidxcom）

文 | 轩窗

智东西11月2日报道，昨日快手在其总部召开了快手人工智能沙龙会议，会上快手科技AI技术副总裁郑文与智东西等少数媒体详细分享了快手在AI领域的进展，并就快手如何在产品中使用AI技术进行了深入交流。

快手由创始人兼CEO宿华于2011年成立，目前定位为短视频社区平台。据了解，目前快手的日活用户数量达到了1.3亿，已总计产生了70亿条原创短视频内容。而从每天的使用情况来看，快手用户会产生1500万条短视频内容，每天的使用时长也超过了60分钟，视频的日均播放量达150亿次。

巨大的视频流量和用户数量，也从一方面决定了快手必须应用AI技术来进行平台运营和管理。智东西了解到，目前快手在技术方面有四个团队，分别负责前端引擎、特效设计、视频内容审核、视频内容理解，总体来说快手技术人员的规模近几百人。

那么快手是如何利用AI技术对海量视频和3亿多的用户运营的呢？今天，智东西将带你一探究竟。

一、 快手日常运营中的AI技术

在沟通会上，快手科技AI技术副总裁郑文向智东西等媒体详细地介绍了快手科技在AI技术上的布局。

（郑文是清华大学软件学院 2001 级学生、斯坦福大学计算机系博士。他曾在硅谷多家知名大公司和创业企业从事计算机图形学、计算机视觉、深度学习等方向的研究。郑文现任快手AI技术副总裁，带领快手在 AI、AR、CV、CG 等方向的研究。）

据郑文介绍，由于快手的很大一部分用户使用的是中低端机型，而现在先进的 AI 技术对设备的计算力要求极高。为了让普通用户体验到AI技术，快手对底层平台进行定制化开发，也就是快手自研的 YCNN 深度学习推理引擎。这一引擎可以让快手APP上的AI技术在大多数机型上都能高效运行，并针对不同机型、不同硬件进行了适配和优化。

郑文说，YCNN深度学习推理引擎针对快手平台的特点，进行了针对性的模型构建，在快手平台上运行与市面上普适的引擎相比快了2～3倍。

快手APP的日常运营包括视频生产、视频理解、用户理解、视频分发四个环节，据郑文介绍，AI技术已经应用于快手视频从生产到分发到每个环节。

1、利用AI给用户视频生成增加乐趣：

首先在视频记录和生成上，快手运用了非常多的AI算法来让用户生成的视频更有趣。

其中，郑文重点提到了8个方面：

（1）、三维人脸技术：这项技术的应用主要包括两方面，一是对人脸进行三位重建，其中将会调用手机硬件进行3D打光，对图片进行活化处理，以及实现对人脸进行变脸；二是利用这项技术驱动表情，利用算法在用户拍摄视频时将人脸替换成Animoji。

（2）、语义分割：这项技术在快手视频中的具体应用有两个，一是对人像进行分割，方便进行后续的特效处理；二是对头发的分割，可以实现对头发的变色处理。

（3）、人体体态估计：这项技术可以实现对用户在视频中的肢体动作进行识别和定位。

（4）、手势识别和检测：这项技术主要用于识别用户视频中的各种手势，再配合快手推出的各种虚拟动画，为视频增加更多玩法和乐趣。

（5）、AR相机姿态估计：据了解这项技术是快手自研的，在苹果推出AR Kit之前快手就已经开始应用了。这项技术将快手视频内的虚拟物体与用户真实场景进行融合。

（6）、智能视频编码：这项技术会分析视频的复杂度以及进行ROI分析（Region of Interest的缩写，直译为感兴趣区域），比如基于人脸进行QP调制（QuickPass，快速通关系统 ）。

（7）、智能暗光增强：该技术可以对视频内容进行暗光检测，如果画面亮度过暗，该技术还将对视频画面亮度进行增强。

（8）、图像质量检测：该技术可以进行迷糊检测和脏镜头检测，对视频清晰度低，或者镜头内有块状瑕疵的视频内容，都可以进行检测，系统则会对用户进行信息提示。

2、利用AI对视频内容进行理解：

而在视频上传后，快手的AI技术还将要让机器学会看懂海量的视频内容。

在理解视频方面，快手的AI技术需要做两项工作：给视频贴标签和语音识别与合成。