新浪新闻客户端

从三次元变身纸片人?这款百度AI二次元技术你还不冲!

从三次元变身纸片人?这款百度AI二次元技术你还不冲!
2020年07月07日 18:02 新浪网 作者 推哥谈科技

  还在沉迷复古风、初恋风?现在最火的是漫画风!还没拥有二次元漫画自拍的伙伴们,该上车啦!二次元漫画风席卷朋友圈,不仅全民拥有了漫画自拍和头像,就连宋轶、李纯、冯提莫、张雪迎、何泓姗等明星都穿越次元壁,二次元小视频拍到停不下来!

  从三次元变身纸片人?这款百度AI二次元技术你还不冲!

  二次元漫画风究竟有多火呢?这么说吧,微博超话#寻找最美漫画脸#被大家阅读了1.8亿次,还有8万条海量评论一同盖楼,使用二次元特效拍摄制作的短视频累计播放量2487万,甚至上了热搜。

  从三次元变身纸片人?这款百度AI二次元技术你还不冲!

  实际上这些可盐可甜的二次元自拍并非来自真人画手,而是在人工智能技术的帮助下一键生成的。点开特效,手机中的自己就从3D变成2D,不仅保留了五官、脸型等个性特征,而且还可以跟随动作、表情的改变实时变化,轻松变身漫画世界的主人公。

  从三次元变身纸片人?这款百度AI二次元技术你还不冲!

  这类特效离不开技术君的支持,尤其是人工智能视频生成技术,漫画特效的火爆也让视频生成技术的应用再次掀起小高潮,甚至走出国门。作为视频技术领域的“优等生”,百度在19年底已在百度大脑AI开放平台上线图片级二次元转换,并于今年5月全球首发手机端上的实时二次元转换。近日百度宣布将通过百度大脑AI开放平台对外开放实时二次元SDK,让更多行业开发者可以轻松拥有漫画特效。更多信息可访问,

  在此之前,百度AI二次元特效技术也已经与B612咔叽、全民小视频等产品合作,创造众多“爆款”,并于近期上线于北美市场Toonout APP,让更多应用轻松Get二次元特效。

  三次元变二次元 AI技术如何实时打破次元壁

  想要在特效中实现漫画中亮闪闪的大眼睛、小巧的鼻子和多变的发色并非易事,背后的技术原理并非像看上去一样简单,漫画特效不仅要做到准确定位人像,更重要的是生成与本人形象一致、且画质清晰的图像,这就需要图像理解、生成等多种技术共同配合完成,也对图像的识别检测等精准程度等提出了较高要求。

  从三次元变身纸片人?这款百度AI二次元技术你还不冲!

  百度AI二次元特效技术将超过十项视觉基础技术与十余个深度学习模型进行组合,协同调动完成特效。为了让漫画版自拍贴近本人,百度采用了像素级别的分割算法、支持150+关键点定位的高精准的人脸关键点识别算法,仔细定位面部细节,保留人物个性化特征,实现人像1:1生成。

  从三次元变身纸片人?这款百度AI二次元技术你还不冲!

  为了保证生成出的二次元图像清晰、边缘柔和,百度更是拿出“世界冠军级”技术——CDSR 超分模型,通过级联的方法逐步将图像从模糊变清晰,可以生成720P 的高清图像,保证用户在手机上高清体验。据悉,该模型曾于2019年,战胜400余支参赛队,拿下计算机视觉 low-level vision 领域中影响力最大的竞赛NTIRE的年度冠军。

  特效自拍能随动而动、实时显示,也对计算效率提出挑战,百度采用最新的模型压缩和模型搜索技术,在手机端实现实时二次元转换,保证了一秒生成的用户体验。

  “爆火”之前已有布局 百度二次元特效技术广泛应用

  二次元特效技术的风靡其实早有预料。2020年伊始,百度旗下全民小视频的“一键动漫”功能,基于二次元特效技术,量身定制的二次元虚拟形象,并收获150万条二次元视频作品,纸片人才艺展示、纸片人小剧场等趣味视频层出不穷。

  主打美颜相机的B612咔叽也通过使用百度大脑的人像动漫化接口,简单四步即可将用户自拍照片转换成高还原度的漫画头像,让你成为朋友圈最二次元的仔。今年4月,双方合作升级,推出多款趣味油画滤镜,让用户轻松变身戴珍珠耳环的少女,在二次元特效的基础上扩展更多图像特效风格,受到广大女性用户的喜爱。

  从三次元变身纸片人?这款百度AI二次元技术你还不冲!

  专注于漫画卡通特效视频&照片编辑功能的Toonout 也于近日接入了百度AI实时二次元特效功能,作为业内首发能力,在北美市场率先上线,产自中国的二次元特效技术“出口”海外。

  作为视频技术领域的佼佼者,百度二次元特效功能可谓“顶配”级别,可以给用户带去更逼真生动、清晰随动的娱乐体验,该能力接口全面开放。

  百度AI开放平台现开放人像特效及医美特效十余项服务邀测,人像特效包含人脸/人体关键点、人脸五官/人体分割、以及人脸属性编辑、人脸融合、人像渐变、人像清晰度增强、美颜美化等多个API及SDK解决方案,满足互联网娱乐、短视频、网络营销等多种业务需求。

  医美特效包含对人脸皮肤上痘痣斑、肤色、皮肤光滑度、眼袋/黑眼圈、毛孔黑头等进行高精度检测与分析,同时支持完整的3D模拟整形解决方案,可生成高保真的人脸3D模型,模拟调整前后效果对比,可应用在智能医美、互动娱乐等多个场景上。

  这样,借助百度二次元特效技术的开源开放,让更多开发者有机会入局这一漫画风口,创造更多娱乐应用,借助百度AI的技术底色,再造“爆款”。

特别声明:以上文章内容仅代表作者本人观点,不代表新浪网观点或立场。如有关于作品内容、版权或其它问题请于作品发表后的30日内与新浪网联系。
权利保护声明页/Notice to Right Holders

举报邮箱:jubao@vip.sina.com

Copyright © 1996-2024 SINA Corporation

All Rights Reserved 新浪公司 版权所有