信息无障碍通道
您的位置:首页>>移动互联

光是蚂蚁呀嘿还不够,AI Studio带你玩转“照片活化”等视频特效

发布时间:2021-03-02 20:29  来源:互联网    背景: 无障碍阅读通道

  这两天最让人上头的神曲是什么?非“蚂蚁呀嘿”莫属呀!

  这个仅用一张照片、一段视频就能做的魔性视频,这两天在某博、某抖和某手上疯狂刷屏。傲娇的表情配合洗脑的音乐,再加上各界大佬的倾情演绎,让人看过一遍就再也忘不了,真可谓“失眠时,没有一只蚂蚁是无辜的。”

图片%201.png

  “蚂蚁呀嘿”火爆全网,各式各样的制作教程也随之而来。其中,最方便的莫过于用PaddleGAN(百度飞桨的生成对抗网络工具套件)来实现。它不仅完全免费,还省去了下载Avatarify(最新消息,该App已被下架)和加速器等多个软件的麻烦,让你无需下载和频繁切换,三步就能生成自己的“蚂蚁呀嘿”小视频。

  接下来就给大家介绍两种制作方法,并揭秘背后的核心技术原理。

  第一种:“小白版”教程

  首先,大家可以点击下方链接,进入AI Studio(人工智能学习与实训社区)中的【天下第一AI武道会-Deepfake换脸】项目,“基础版”或“高级版”两种运行环境皆可:

  https://aistudio.baidu.com/aistudio/projectdetail/1189026

  第二步是备好素材:一张源图片和一个驱动视频。源图片就是你想让他唱歌的照片,只保留人物脖子以上部分,尺寸要求256*256,图片文件名改为【01. png】。驱动视频则是单人唱着“蚂蚁呀嘿”的小视频,可以从网上直接搜索下载,视频文件名改为【02. mp4】。(注意png和mp4都是小写)

  第三步上传图片和视频,并点击“运行全部”,然后静候几分钟即可。待页面左侧出现名为“export. mp4”的文件,即为运行成功,专属于你的“蚂蚁呀嘿”就这样出炉啦。

  (第一步:在AI Studio中搜索并运行项目)

  (第二步:备好一张源图片和一个驱动视频)

  (第三步:上传素材并运行全部)

  第二种:“进阶版”教程

  因为有些同学不只想做“蚂蚁呀嘿”,还想自己录制面部动作,生成任意题材的花样视频,甚至是开发Avatarify这样的App或小程序,走上“致富之路”,而这通过飞桨也都能实现。

  飞桨已将蚂蚁呀嘿的核心技术开源于PaddleGAN套件中,在AI Studio平台实现了完整的在线项目【PaddleGAN表情动作迁移进阶版】,大家可以根据需要,使用AI Studio的免费算力,实现更多脑洞大开的动作迁移效果!

  https://aistudio.baidu.com/aistudio/projectdetail/1586056

  进阶版制作起来同样分为三步,并都是在AI Studio平台上实现,这里继续以“蚂蚁呀嘿”为例进行介绍。首先,大家可以下载PaddleGAN代码。

  !git clone https://gitee.com/PaddlePaddle/PaddleGAN

  !pip install -r requirments.txt

  接下来,使用表情迁移命令。

  命令:

  !export PYTHONPATH=$PYTHONPATH:/home/aistudio/work/PaddleGAN && python -u tools/first-order-demo.py --driving_video ~/fullbody.MP4 --source_image ~/秃头乔哥.png --relative --adapt_scale

  只需在如下命令中的driving_video参数和source_image参数分别换成自己的视频(蓝色部分)和照片路径(黄色部分),即可运行得到“蚂蚁呀嘿”小视频。

  • driving_video: 驱动视频,模型将学习视频中人物的面部表情
  • source_image:源图片,模型将驱动视频中的人物表情迁移至源图片的人物上

  这个视频目前还没有配乐,所以还需要第三步,为视频配上声音。

  运行以下命令即可生成最终的“蚂蚁呀嘿”专属视频啦(本例中的视频文件名为export.mp4)!

  videoclip_1 = VideoFileClip("/home/aistudio/fullbody.MP4")

  videoclip_2 = VideoFileClip("./output/result.mp4")

  audio_1 = videoclip_1.audio

  videoclip_3 = videoclip_2.set_audio(audio_1)

  videoclip_3.write_videofile("./output/export.mp4", audio_codec="aac")

  (生成效果图)

  “蚂蚁呀嘿”视频的核心技术是动作迁移算法First Order Motion,它的功能是将人物A的脸部动作搬移到人物B身上,让人物B的脸演绎人物A的表情。

  First Order Motion算法的结构图如下:

  简单来说,First Order Motion能够通过自监督的方式学习到图像中的关键点。不需要提前知道目标的一些信息,比如骨架等就可以实现动作迁移。

  PaddleGAN的表情迁移能力灵活支持各类不同表情的面部迁移,不仅是“蚂蚁呀嘿”,其他魔性动作也都能制作。除此之外,PaddleGAN这个免费开源的宝藏套件还包含数十种能力,包括唇形合成(对嘴型)、视频/照片修复(上色、超分、插帧)、人脸动漫化、照片动漫化等等。能实现让“蒙娜丽莎”播新闻、修复百年前的老照片、或是将普通的风景照“二次元化”等各种神操作,一个比一个厉害!

  (唇形合成)

  (老照片修复)

  (照片动漫化)

  如果你也想不下载App就能做魔性视频,或是有更多、更大的脑洞想要实现,指路百度AI Studio亲自试试吧!

特别提醒:本网信息来自于互联网,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。


返回网站首页 本文来源:互联网

英特尔第 13 代 Raptor Lake 处理器向 Linux 推出首个驱动补丁
11 月 14 日消息,第 12 代 Alder Lake 处理器发布后,英特尔开始为第 13 代 Raptor Lake 处理器做准备,目前已推出了首个驱动补丁。
日期:11-14
押注元宇宙,百度推出沉浸式虚拟社交 App“希壤”:用户可通过虚拟身份与客户、伙伴进行交流
11 月 14 日消息,百度近日在苹果 App Store 和安卓应用商店上线了一款名为“希壤”的社交 App,发力元宇宙。百度称,将打造一个身份认同、跨越虚拟与显示、永久续存的多人互动虚拟世界。
日期:11-14
国内首个IPTV 8K专区上线:每月更新15-20小时
随着宽带设备升级,如今很多家庭已经具备观看8K在线视频的能力。
日期:11-12
小米 11 Ultra 在印度停售,未来不会补货
10 月 31 日消息,根据外媒 notebookcheck 消息,小米 11 Ultra 旗舰手机近日在印度地区的库存已经售罄。小米已经通知印度公司,未来不会进行补货。
日期:10-31
微信大更新:电脑版自动登录无需手机确认 可关闭个性化广告
日前,微信上线了一次更新版本8.0.16,只不过此次依然是苹果先行,小编实测安卓无更新,苹果则更新成功。
日期:10-31
英特尔 Xe-HP GPU 项目终止,未来专注于 Xe-HPC/HPG 系列显卡
10 月 31 日消息,英特尔高级副总裁兼加速计算系统和图形事业部总经理 @Raja Koduri 此前在推特表示,Xe-HP“ Arctic Sound” 系列服务器 GPU 已经应用于 oneAPI devcloud 云服务,并不会将其商业...
日期:10-31
《王者荣耀》公布首部动画番剧预告,英雄系列电影计划正式开启
10 月 30 日消息,《王者荣耀》在今日晚间举办了 2021 共创之夜活动,同时公布了全新 IP 生态。
日期:10-31
苹果停产搭载英特尔芯片的 21.5 英寸 iMac,官网已全部下架
10 月 31 日消息,苹果公司已经悄悄停产了搭载英特尔芯片的 21.5 英寸 iMac,它仍然作为适合教育机构的低端配置提供。客户可以选择 24 英寸和 27 英寸 iMac 型号。
日期:10-31
7成电视开机广告无法取消!8成消费者连1秒都不能忍
据“消费者报道”统计,在目前主流的19个电视机品牌中,只有LG、松下、荣耀、索尼、三星等5个电视品牌没有“开机广告”,占统计品牌的26.3%。而飞利浦、夏普等14个电视品牌有开机广告,...
日期:10-29
B站全面上线 UP 主版权保护计划,一键维权打击内容侵权
10 月 29 日消息,哔哩哔哩今天宣布推出“UP 主版权保护计划”,正式为B站个人创作者提供跨平台侵权稿件检测以及一键维权等功能。
日期:10-29
快手:专项整治互联网用户帐号运营乱象
10 月 21 日消息,今日,快手发布《清朗・互联网用户帐号运营乱象专项整治公告》称,自 10 月 18 日起开展专项行动,对平台内帐号运营乱象进行整治。
日期:10-21
上海市消保委点名“蹭网神器”类 App:有信息泄露风险,建议删除
10 月 21 日消息,上海市消保委今日发文提醒用户,号称“蹭网神器”的 App 有信息泄露风险,建议删除。
日期:10-21
身份认证更可靠!华为蒋亚非:未来鸿蒙OS可多维度检测人体特征
随着科技飞速发展,“5G”时代的到来,网络与人们的生活息息相关,但网络在带来便利的同时,也存在不少陷阱与隐患。
日期:10-17
小红书回应“滤镜景点”过度美化问题,提倡用户真诚分享
10 月 17 日消息,今日小红书官方回应了用户吐槽该平台上“滤镜景点”的问题。官方表示,“秉持“真诚分享,友好互动”的社区价值观,分享我们的反思和动作。”并表示已经知晓...
日期:10-17
中国邮储银行:因业务调整,将停止邮储生活 App 全部服务
10 月 9 日消息 今日中国邮政储蓄银行官网发布公告称,因业务调整,决定停止邮储生活 App 相关服务。
日期:10-09
百度地图大数据:10月4日高速拥堵里程峰值出现在16时
十一黄金周假期已过半,据百度地图节假日出行仪表盘数据显示,10月3日全国高速全天拥堵峰值出现在16:30,拥堵里程为2359.35km。而10月4日截至17:00,全国高速平均拥堵里程818.03km,拥堵峰值出现在16:00,拥...
日期:10-04
百度地图沈腾语音包十一出游版上线,一路都是爆笑配方
这个世界上存在一种“一出场就是喜剧,一张嘴就是欢乐”的人类,他的名字叫沈腾。
日期:10-04
支付互联互通再进一步,银联云闪付 App 接入腾讯和微信更多使用场景
9 月 26 日消息 今年 8 月,有网友发现云闪付 App 已经可以在淘宝 App 中付款,而且还支持向支付宝以及微信钱包转账,这意味着微信支付和支付宝都开始逐渐放开对生态的封闭限制。
日期:09-26
iOS 15全球更新,昆仑实验室协助修复高危漏洞获苹果官方致谢
美国时间9月20日(北京时间9月21日),iOS 15正式版全球更新。“昆仑实验室”因协助苹果公司修复内核高危漏洞(CVE-2021-30857),在更新说明中获其致谢。
日期:09-21
今年上半年,苹果 App Store 和谷歌 Play 下架了超 80 万个 App
9 月 20 日消息 Pixalate 发布了“2021 年上半年下架手机 App 报告”显示,谷歌 Play 和苹果 App Store 在 2021 年上半年下架的 App 超过 813000 个,其中 86% 以上的应用针对 12 岁及以下的儿童。
日期:09-20
  专栏介绍
即时新闻 的专栏
即时新闻发表的文章