新闻资讯

还不错更好地保捏指标脸的妆容信息

发布日期:2024-04-10 07:08    点击次数:126

还不错更好地保捏指标脸的妆容信息

1.JPG吸尘器

近期,国外斟酌机视觉与形式识别会议CVPR 2022在好意思国新奥尔良举行,并同步进行线上会议。由王君乐博士提示的腾讯Turing Lab执行室提交的论文《High-resolution Face Swapping via Latent Semantics Disentanglement》(基于隐语义解耦的高分辨率换脸)得手入选。

论文由腾讯Turing Lab与华南理工大学、卡迪夫大学及中国香港大学合营完成。接下来,咱们将为大众解读论文的中枢效用,一谈来学习斟酌机视觉界限的最前沿推敲吧!

基于隐语义解耦的高分辨率换脸

High-resolution Face Swapping via Latent Semantics Disentanglement

在换脸任务中,咱们需要针对给定的源脸和指标脸,将源脸的身份信息移动至指标脸上,并同期保捏指标脸的属性信息。该技艺连年来赢得大批眷注的,并在互动文娱、广电、安全与狡饰保护等界限均展现出较大的应用后劲。

这篇论文薄情了一种新的、基于预教师GAN模子中内在先验学问的换脸步调,竣事了高分辨率(1024X1024)换脸。该步调除了能保捏指标脸的常见属性信息,如激情、姿态、光照、布景等除外,还不错更好地保捏指标脸的妆容信息。

在这个职责中,咱们摆布生成抵挡模子隐空间的解耦特色,将不同性质的属性隔离移动。具体来说,激情、姿态等是与结构关系的属性,而光照、立场等是与外不雅关系的属性。这两类属性由隐编码的不同层隔离甩手:一张图片隐编码的前半部分甩手结构信息,尔后半部分甩手外不雅信息。

咱们先隔离将源脸和指标脸回转到StyleGAN的隐空间内。同期将源脸和指标脸关节点的热图送入关节点编码器, 首页-微平奥坚果有限公司得到一个结构属性窜改向量, 首页-盛 加政咖啡有限公司这个向量作用在源脸的隐编码上, 涞水县能标签有限公司即可竣事结构属性的移动。

同期, 首页-盈园州麻类有限公司咱们用指标脸隐编码的后半部分代替源脸隐编码的后半部分,企业-诗环丝杂果有限公司这么即可竣事外不雅属性的移动。将经管之后的隐编码送入预教师好的StyleGAN中,即可得到初步的换脸扬弃。

2.JPG

此外,为了竣事指标脸布景的移动,咱们将指标脸告成送入指标编码器,吸尘器得到不同分辨率的特征,并和StyleGAN中间经由中产生的特征在解码器中进行交融。这么咱们就赢得了最终的扬弃y。执行扬弃标明,咱们的步调在图片和视频换脸任务中,好多方面的效果均最初了多SOTA步调。

注:图片只用作学术推敲,毋庸于营业用途。

对于CVPR

CVPR 全称 IEEE 国外斟酌机视觉与形式识别会议(IEEE Conference on Computer Vision and Pattern Recognition),该会议始于 1983 年,是斟酌机视觉和形式识别界限的顶级会议。本年大会共收到来自全球各大高校、科研机构与科技公司共8186篇投稿,最终汲取的论文险些王人代表了年度斟酌机视觉界限最新、最高科研水平以及改日发展趋势。

3.JPG

这次论文入选,亦然对腾讯Turing Lab执行室现阶段科研及更始智商的认同。改日,腾讯Turing Lab将无间奋发,为大众在斟酌机视觉界限带来更多可能。

腾讯Turing Lab执行室进展东谈主

4.JPG

王君乐博士

腾讯大师推敲员

在由中国音数协游戏工委、浙报数字文化集团股份有限公司(下称浙数文化)承办的电子竞技发展论坛上,浙数文化副总经理李庆、腾讯互娱市场部市场总监,腾讯游戏、腾讯电竞品牌负责人云洁、FPX电子竞技俱乐部总经理李淳、中国传媒大学游戏专业教师张兆弓、龙渊 CEO 李龙飞,网映CEO林雨新、量子VSPN COO郑夺、度势体育CEO陈维力、完美世界公共事务总监乔婷婷等嘉宾,从产业发展、赛事主办、俱乐部运营、电子竞技教育等多角度分享了各自的观点和思考,共同探讨促进电竞行业未来的健康发展。

365建站

尊敬的各位领导、各位来宾,媒体朋友,大家上午好。我是巨人网络刘伟,今天与大家分享一些我们对行业现状以及未来发展的思考。

领有十余年斟酌机视觉、多媒体、机器学习界限推敲素质,在东谈主体姿态忖度与重建、图像质料评价、斟酌影相学、千里浸式多媒体等界限有较深的了解及实战素质,并在这些界限提示团队进行探索与落地的职责。

曾主导腾讯CenseoQoE画质评价有野心委果立与社区开源吸尘器,主导腾讯时尚云游戏云霄虚实互动技艺的研发。此外,在包括CVPR、NeurIPS、TIP、TMM等顶级会议及期刊上发表多篇论文,并为多个会议及期刊担任审稿东谈主及组织者。








    Powered by 企业-能海霆棉类有限公司 @2013-2022 RSS地图 HTML地图

    Copyright 365建站 © 2013-2024SSWL 版权所有