新闻资讯

HUAWEI HiAI x 快手:在?看看你的AI撕漫脸

2020年10月22日

容我们猜猜,这是不是你的睡前标准流程——


躺在床上看完小说或刷完剧后,闭上双眼把自己代入主角,随后在心中天人交战一番,这才心满意足地睡去。

 

 

01

 

AI+手绘滤镜,过足主角瘾:
还在睡前脑补?不如直接滤镜“穿书”

 

但最近,许多老铁竟纷纷开始拒绝脑补,原来是快手推出了一个由HUAWEI HiAI加持的短视频手绘特效,该滤镜宣称“一秒穿书,变身主角”,情(hún)感(shēn)丰(shì)富(xì)的小编怎能错过此等黑科技,火速就打开了快手准备体验一番。


体验步骤:打开快手拍摄界面 → 点击左下“魔法”选项 → 选择“手绘滤镜”,秒速变身!

 


正对屏幕的一瞬,主角光环立刻加身,瞧瞧,这肤如凝脂的双颊,顾盼生辉的明眸,如此盛世美颜,如此撕漫脸,不正是言情封面女主吗?难得的是,眉眼之间始终不乏个人特点,我依然是我,不因滤镜而丢失特色。

 

 

02

 

亿量级APP功能部署挑战:
机型多样,算力不一

 

当快手工程师接到手绘滤镜系列功能需求时,很是担忧自身的满头青丝:相比于以往的特效玩法,“手绘滤镜”系列要求给用户带来一个兼具高清真实感和手绘美感的短视频特效。换言之,该特效既需要保证高度保留用户的人脸特征,还要毫无违和感地融入手绘风格,同时保证流畅的实时滤镜动效。

 

追求极致体验的快手开发团队,在各个环节上下足了功夫:经过混合训练方式得到整体手绘风格化效果,又使用人脸关键点、人像语义分割和GAN等AI技术进行细节增强,最终实现在短视频滤镜下,精准捕捉用户神情动作,并将其实时转化为手绘动效。

 


然而,对于快手开发团队而言,得到一个 “实时、手绘、细节”三位一体的复杂神经网络模型后,机型适配的挑战才正式开始:快手作为一个亿量级用户的APP,所覆盖的机型不一而足,将算法模型部署到算力不一的手机上,将是一场漫长的攻坚战。

 


03

 

HUAWEI HiAI Foundation加速:
轻松解决适配难题,功能快速部署落地

 

为使产品快速落地,快手工程师选择接入HUAWEI HiAI平台,快速将已有模型迁移到华为手机上,模型调优、端侧部署等问题通通迎刃而解。同时,HUAWEI HiAI Foundation的强大算力针对NN推理进行加速,保障了模型在手机端的流畅运行。


HUAWEI HiAI是面向智能终端的AI能力开放平台,基于 “芯、端、云”三层开放架构,让开发者能够快速利用华为强大的AI处理能力。目前,HUAWEI HiAI已支持30+华为机型,助力开发者一键接入,多端部署。

目前,除了已支持TensorFlow、Caffe等主流框架外,HUAWEI HiAI通过Graph IR接口,广泛地支持主流端侧推理框架,让开发者无需改变开发习惯,一经接入即可轻松获取加速能力,这正是由于HUAWEI HiAI坚持以框架对接架桥铺路,才使AI端侧部署快如驱车于高速。


就本次功能部署而言,快手正是采用Graph IR接口在HiAI Foundation层对NPU进行适配,使得主干网络模型高效支持depthwise卷积、pointwise卷积等算子,端侧运算,时延更低,在保持低功耗运行的同时,运行时间从300+ms大幅降低至13 ms,显著减少模型调优所需的人力投入,有效突破模型端侧部署难题,实现手绘滤镜功能在华为手机的快速落地。

 

 

 

面对如此高效的部署方式

你是不是也心动不已?

加入我们,马上释放你的开发之力