当前位置: 新豪天地登录网址 > www.3559.com > 正文

上人脸识别和AR,快手上线

时间:2019-11-06 14:17来源:www.3559.com
最近某个 Reddit 用户将“神奇女侠” 盖尔·加朵(Gal Gadot)的脸,P到了成人视频上,效果相当不错,而且他使用的是时下火爆的机器学习技术。 这里隐藏的真正问题,在于利用开源的

最近某个 Reddit 用户将“神奇女侠” 盖尔·加朵(Gal Gadot) 的脸,P到了成人视频上,效果相当不错,而且他使用的是时下火爆的机器学习技术。

这里隐藏的真正问题,在于利用开源的AI架构进行视频换脸这件事,不是太复杂太前卫了,而是太简单太容易了!

图片 1

据快手产品人员介绍,“萌面”魔法表情能够帮助用户更好地表达自己,带给用户更新奇体验。“萌面”魔法表情可以用呆萌的卡通形象代替个人真实的面部特征,同时又可以保留眨眼、张嘴、摇头等生动的面部表情,丝毫不妨碍通过面部表情传达信息。同时,录下背景声音,便于用户进行短视频创作。

严格说,这一技术属于动作捕捉技术的一个小类,叫面部捕捉(face capture)。那些脸上的黄点,是表情变化中的关键点,就像脸的“关节”一样,计算机只需要这些信息就能合成表情。而在面部识别技术中,它被称为面部追踪(face tracking)。

而换个角度想想,假如同样的技术运用在视频电话里呢?假如你接到的亲人/朋友的视频电话,套取你的隐私或者跟你借钱,事后竟然发现是陌生人处心积虑伪造的。假如一个人可以彻底伪装成另一个人,还会有人开心吗?

图片 2

全机型流畅适配背后:海量数据支持与技术经验积累

图片 3左:合成的(Synthetic)彼得·库欣扮演的威尔霍夫·塔金,右:演员盖·亨利 图片来源:nytimes.com

当然,这哥们也不是专注女明星,上边这张就是他分享的如何把尼古拉斯·凯奇换成川普的教程,大概其内心深处也深谙中国的“表情包之道”。

图片 4

无需3D结构光手机,快手用AI技术实现Animoji效果

绝大多数商业作品只是用这种技术制作奇幻生物,然而工业光魔公司(Industrial Light & Magic)更进一步,在银幕上复活了已经故演员。

这样的换脸技术虽然高超,却并不让我们担忧。因为这是电影的艺术需要,必须要耗费大量人工与后期特效成本,并且要求专业的视频剪辑技术才能实现。这意味着,这种精准的换脸并不能出现在日常生活中,也不会给普通人带来威胁。

iPhone X作为目前最AR的苹果手机,叫出万元高价,大批忠粉乐此不疲为信仰埋单!包容它牺牲了苹果一直以来的审美来换取更多功能的实现。背后的双摄像头,看起来也是很有红绿灯的感觉。“可爱”齐刘海,放置了听筒、前置摄像头和各种传感器。

图片 5

图片 6小岛秀夫的《死亡搁浅》,什么时候发售啊?(打岔)图片来源:dualshockers.com

当我们不能相信自己的眼睛,各种混乱和罪恶的重量,绝对会大于那一点点违法的“福利”。

图片 7

据了解,快手能够在全机型实现这项功能,得益于团队近年来积累的AI技术经验以及海量短视频数据。工程师介绍,此次实现“萌面”魔法表情效果,运用的是二维图像信息,从图像深层次分析和理解出发,通过对人脸关键点精准识别捕捉用户的细微表情。

其实类似的面部替换技术,早就被广泛运用在大片里了。例如半兽人、咕噜、阿凡达,它们都用了动作捕捉(Motion Capture)技术。动作捕捉技术常用于电影工业,游戏产业,比如:

图片 8

同时,帕克西利用”表情识别“技术开发了四川心情变脸程序, 如红色愤怒脸谱、蓝色伤心脸谱、黄色开心脸谱。让普通大众也能体验国家二级保护机密川剧变脸的乐趣。

中新网7月20日电 近日,快手APP上线名为“萌面”的魔法表情,能够在任意iOS及Android设备上实现iPhone X的Animoji玩法。呆萌的二哈、乖巧的猫咪以及精致的猪猪,每一款表情均能捕捉用户眨眼、张合嘴巴、摇头等共50余种表情,视频背景还可以选择现实背景或系统提供的四种图案,这是短视频平台首次上线相关玩法。

这一技术的关键在于,替换的脸要和原视频上的脸表情同步。大致原理是通过算法识别出面部的特定结构——不仅仅是眼睛、鼻子、嘴巴的位置,也包括颧骨、下巴、脸颊的形状,然后按照这些特征点做替换。目前这一技术并没有达到以假乱真的地步。

借助AI,直播中换脸和换声正在同步向前跨越。那么带来的影响会是什么呢?

增强现实(人体深度传感器)

去年,苹果发布iPhone X, Animoji一时成为该手机卖点。今年5月,小米发布小米8探索版,称也将上线与Animoji相似的米萌功能。两款手机的Animoji效果,均利用了摄像头的3D结构光技术,硬件成本高昂。而快手此次推出的“萌面”魔法表情,在任意iOS和Android设备上都能实现。

图片 9左:P得看不出破绽,右:破绽明显

当然了,Face2Face目前是个封闭状态,用户只能扮演其提供的角色尝尝鲜而已。但经过了一年多的发展,直播中的脸部捕捉和替换技术也已经大幅度提升。如今我们可以在直播平台上看到实时替换的背景和道具,而利用AI在直播中进行脸部替换,也已经是近在咫尺的一件事。

帕克西表情识别技术可以有效识别单张图片或视频中“生气/厌恶/恐 惧/高兴/悲伤”等6种表情,帮助客户有效跟踪用户的情绪变化,其应用场景多样且仅需采用普通摄像头即可实现实时追踪,硬件成本低,可以支持windows 安卓 ios等多个平台。

Animoji 短视频玩法,丰富用户表达方式

图片 10面部的点是“关节”,连上线变成骨骼.图片来源:petapixel.com

有没有很开心?当然,你跟直播平台可能都开心了,小鲜肉却不开心了。

图片 11

图片 12

图片 13《加勒比海盗》中的戴维·琼斯(Davy Jones)图片来源:gamedev.stackexchange.com

图片 14

图片 15

快手“萌面”魔法表情推出,进一步丰富了用户短视频的创作形式。不同于iPhone X只能拍摄脸部视频,快手用户可以结合同框、K歌等功能,利用“萌面”魔法表情拍摄各种极具创意的段子短剧,让Animoji玩法获得极大延展。

图片 16扮演深井冰,哦不,史矛革的卷福 图片来源:businessinsider.com.au

更复杂的伦理情况还有很多,比如一个人享有故去亲人的肖像权吗?假如一个人希望用AI来重现已故的亲属,与亡者进行视频通话,但另一个亲属却坚决认为这是违法行为,那么到底该听谁的?

图片 17

目前,快手“萌面”魔法表情支持五十多种面部表情的捕捉,这得益于快手超过50亿视频的数据库,以及人脸识别的技术积累。快手工程师将相关算法及模型进行深度优化,最大程度减少对手机硬件资源的占用,从而让低端机型用户也能实现流畅体验。

恐怖片演员彼得·库欣逝世于1994年。2016年在电影《星球大战外传:侠盗一号》中,技术人员将他拉进现代的巨幕。这位“现代”演员的背后是另外一位演员盖·亨利,技术人员捕捉了盖·亨利的表情,然后合成了数字版的彼得·库欣。虽然两位演员的脸挺相似的,但是技术人员仍旧要处理很多细节问题,比如彼得·库欣发“啊”这个音的时候是不动上嘴唇的。

图片 18

如果您有这类技术或产品的需要,可以与我们联系,我们将竭诚为您服务。

负责研发快手“萌面”魔法表情的工程师介绍,快手“萌面”魔法表情是基于人脸关键点、图像特征提取等AI技术,是多模态技术的成功应用,无需搭载3D结构光摄像头,仅用普通千元安卓机摄像头就能跟踪捕捉到用户的细微表情,且保证识别过程精准稳定,比如眨眼、噘嘴、摇头等表情均可以实时捕捉。

深度学习,另辟蹊径

动作捕捉技术的关键在于识别人的表情,特别是脸上那些关键的位点。而深度学习技术也能满足这一要求,一些研究团队甚至演示了伪造美国前总统小布什,奥巴马,现任总统特朗普,以及俄国总统普金的视频。

图片 19Face2Face 算法演示,上面的人提供表情信息,下面的人提供脸的信息 图片来源:QUARTZ

深度学习技术和那些专门的影视工业技术相比,得到的结果要粗糙很多,更容易识别出来,然而它也要便宜很多。谷歌、微软、亚马逊这些大公司的软件技术和平台都是公开的,深度学习技术飞速发展,很多论文都在研究者之间共享,而且家用级别的显卡就能处理深度学习算法,不一定要用到云计算和超级计算机等技术。

但这还没完,面部捕捉技术已经能手机上用了,比如 iPhone X 的 Animoji 技术。能够用于识别面部表情的技术就能用于伪造表情。

图片 20苹果的 Animoji 图片来源:businessinsider.com

图片 21苹果官方的演示 图片来源:medium.com

一些技术爱好者也正在将这一技术移植到安卓手机上,我建议谨慎使用这些app。另外也希望手机的软硬件厂商更加注意信息的安全,我们在得到便捷的同时,手机也存储了更多的私密信息,手机和电脑系统本身的安全性也值得花更多的力气去重视,而不是随便打个补丁然后又让补丁失效。

好吧,已经能伪造视频了,但声音还是造不了假的?吧?

并不是,Adobe 公司在2016年演示了 Voco 技术,他能让你简简单单输入文字就能伪造人的声音。到目前为止这项技术都没有看到商业化的迹象,技术演示过程中Adobe表示,他们会在技术上做类似水印的东西,帮助人识别伪造的声音。

无独有偶,加拿大的AI创业公司 Lyrebird 在2017年4月份声称,只要有1分钟的样本,他们就能模仿出你的声音。这听起来比 Adobe 的技术还要夸张,因为 Adobe 声称它们需要20分钟的样本。

看到这里,可能你已经懵了。所以。。。怎么办?

实际上利用特效技术伪造视频很早就有了,Zach King 就是各种翘楚。有些只是娱乐,有些东西却是别有用心。总之,不要盲目相信网上看到的视频

图片 22人家只是娱乐一下啦 图片来源:pinterest.com

以后,随意放在网上的照片、视频、声音、文字都需要认真去对待,因为它们会被人用来伪造我们自己。我们虽然不是权贵富豪,但也经不起损失。

我想已经有人意识到伪造视频的祸害,开始做这类识别了,很快创业公司就会如雨后春笋般出现。本文作者将从技术和影响力两方面跟踪这个事情的进展。

然后他会通过TensorFlow上提供的机器视觉相关模型,学习和理解原版小电影中女主角的面部特征、轮廓、动作和嘴型等等。继而让模型在素材库中寻找各种角度、各种表情下AI认为合适的图片与视频,对原本视频进行替换。

帕克西专注于用户形体数据采集,除了脸型智能技术,同时拥有体型智能技术开放应用。

这一技术引发了不少争论,一些人表示不能接受。虽然电影获得了肖像授权,仍旧有一些伦理问题亟待回答,我们应该在荧幕上复活故去的演员么?

在座的各位,是不是已经试过人脸解锁手机了?是不是尝试过刷脸购物了?玩过人脸识别的动物表情小游戏了没?如果都有的话,那么想必咱们可以达成一个共识:AI在人脸这件事上已经越来越精通了。

此次IPhoneX在形体智能上的应用与创新与我们帕克西不谋而合,我们专注于用户形体数据采集、管理与服务,目前可承接业务达22项,涵盖人脸识别与数据测量、肢体跟踪与数据测量、虚拟试穿试戴解决方案、VR/AR解决方案、互动娱乐解决方案5大领域。能为各行业产品营销及个性化定制等服务提供强有力的技术支持!

双头人开播?川普坐在白宫办公室里跟你连麦?某当红小鲜肉在直播中跪着给你唱《征服》?没问题,统统都可以。

每一代iPhone的新功能、新变化,其实都在无形中改写了创投商业历史、互联网历史。

哦对了,最后应该说一下如何防止别人做出你的AI换脸视频:不要发太多自拍。

iPhone X的新功能中尤其以Face ID到Animoji表情为最大亮点。

换脸的恐怖之处,在于AI很简单

与iPhone X利用面部动作追踪技术驱动Animoji表情有着异曲同工之妙,帕克西以自主研发的人脸识别、面部追踪以及AR技术实现实时动态 的“换脸”,且换脸的内容不受限制,呈现形式更为直观立体!

总而言之,AI换脸术这件事在今天可以归纳为三句话:

iPhone8 和iPhone 7外观上看起来并没有什么不同,除了拍照在弱光拍照条件下,比上一代有提升以及采用苹果A11 Bionic芯片和GPU的升级,在功能上感觉区别也不是很大。于是发布会后众人的心态出奇地一致:

视频中的女主角(确切的说是女主角的脸)是《神奇女侠》的扮演者盖尔·加朵。但这当然不是其本人出演了什么令人羞耻的小电影。而是有人用深度学习技术把盖尔·加朵的脸替换到了原片女主角的身体上。乍看之下基本没什么破绽,但其实两个人是不怎么像的。

iPhone X运用面部追踪3D传感器可创建自定义的3D表情符号。通过用户真实的面部表情和声音创作出动画表情,并通过短信发送给对方。

三、如何监管,大概是不知道的。

9月13日凌晨苹果发布会上的iphone 8和 8plus 完全被iPhone X抢了风头。大家始料未及,各大品牌事前借势营销都蹭错了热点,好唏嘘~

图片 23

Animoji表情

让我们重新回到前面提到制作女星换脸小电影的deepfakes。这哥们不仅是个老司机,还是一位热爱分享的“技术型活雷锋”。他不仅免费发布了他的成果,还不厌其烦的分享了自己制作换脸视频的教程,以及自己编写的深度学习代码和相关数据集……大概他的意思是,别再问我要谁谁的视频了,你们自己做去吧……

这个功能主要用于手机解锁和支付等。使用3D人脸识别技术,并融入特定场景,识别准确度高且拥有比 Touch ID 更高的安全性。

图片 24

图片 25

如果说识别只是AI对人脸做出的第一件事,那么第二件事是什么呢?从种种迹象来看,答案只有一个,那就是给人换脸。

图片 26

由于其精准的捕捉效果和实时化能力,Face2Face在诞生之日起就引起了轩然大波。在其演示视频下,无数网友质疑这项技术将成为网络诈骗、绑架勒索的帮凶,质疑如果视频电话的另一端,竟然不是你认识的那个人,那将会是多么恐怖的一件事。

图片 27

去年年初的时候,德国纽伦堡大学的相关团队发布了一个应用,也就是非常出名的Face2Face。这款应用的能力,是通过摄像头进行脸部追踪,从而让视频里的人跟着你说话。

Face ID面部解锁

图片 28

二、乱是一定要乱的。

山雨欲来:下一站是直播 换脸

当然,AI不会真的去给人整容(至少目前不会),它能做的是在视频里给人换脸。比如最近刷屏级的小视频可能大家都已经看过了。

各位同学是不是感觉有点兴奋?以后想看哪位明星的片子自己动手做就是了,甚至可以把自己的脸替换上去演对手戏,各种YY皆能成真。

法律难题和伦理悖论

如果你也想学习这么炫酷的技术那就点击预约报名即刻开启你的学习之旅吧!

一、火是肯定要火的。

图片 29

当我们打开手机电脑,发现一切都不是真的。真是挺丧心病狂的一件事。

(保罗·沃克和最终成为他替身的两个弟弟)

与之相配合的,是AI进行声纹识别与声音合成技术也在突飞猛进。比如Adobe在近两年陆续发布了新的声音合成技术。普通人用AI来进行柯南用蝴蝶结完成的换声,已经不是多困难的事情。

AI换脸并不难,由于多种应用场景的存在和超高的娱乐性,我们也很难阻止它的到来。于是真正该让我们头疼的,大概就是深藏其中的法律问题与伦理陷阱。

根据他的分享,制作一个明星换脸视频非常简单。以盖尔·加朵的视频为例,他首先会在谷歌、YouTube以及各种网络图集中收集盖尔·加朵的各个角度的视频和图片。组成一个能满足深度学习任务进行脸部替换的素材库。

其实视频换脸这件事也并不出奇了。耳熟能详的可能要属《速度与激情7》里为了让保罗·沃克回归,片方用了替身 动态捕捉 CGI动画的方式,以保罗的两位弟弟为替身,最终让观众的老朋友重新回到了大屏幕上。

图片 30

你如何证明ta易容的是你呢?或者说你如何证明你是你?我们知道,肖像权是指你本人拍摄的图像和视频。但是用你的面部数据搭建起来的AI模型还属于你的肖像权范畴吗?

但AI在瓦解这一切。

这个ID叫做deepfakes的网友,始终致力于在Reddit上分享其利用AI技术制作的明星换脸小视频。差不多所有当红的好莱坞女星都被他“炮制”了一遍。

(左为原片角色,二人差距其实不小)

编辑:www.3559.com 本文来源:上人脸识别和AR,快手上线

关键词: www.3559.com