杨净 萧箫 发自 凹非寺 量子位 | 大众号 QbitAI

防不胜防,10分钟就被AI骗走430万!

这是这两天震惊全网的真实欺诈案子。

据包头警方发布,一公司老板接到朋友的微信视频电话,因为长相和声响承认都是“自己”,他丝毫没有置疑就把钱打了过去。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

结果一问朋友,对方底子不知道此事。这人才知道,原来欺诈者DeepFake了他朋友的面部和声响。

音讯一出,直接冲上热搜第一。网友们纷纷表明:离大谱啊!不敢接电话了。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

也有人提出质疑:AI这么好练习?这需求把握个人的大量信息吧。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

不过,虽说是看上去离谱的小概率事件,但据相关统计,AI技能新骗局来袭后,欺诈成功率竟挨近100%

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

究竟连那些直播卖货“杨幂”“迪丽热巴”、B站歌手“孙燕姿”“林俊杰”都不是真的。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%
图源抖音@文娱日爆社,疑似直播间用杨幂的AI换脸带货

10分钟被AI骗走430万

据微信号安全包头介绍,一个月前,福州市一科技公司法人代表郭某,忽然接到老友的微信视频。

谈天过程中,这个“老友”透露,自己朋友在外地招标,需求430万保证金,且公对公账户过账,所以想用郭某公司的账户走一下账。

布景介绍之后,“老友”就找郭某要了银行卡号,而后甩出一张银行转账底单的截图告诉郭某,现已把钱打到了郭某的账户上。

结果因为现已视频谈天以及各种“物证”,郭某并没有过多置疑,乃至也没去核实钱款是否到账。

几分钟之后郭某就分两笔将钱打了个过去,本想去跟老友报备一下:“事情现已办好”。

但是,老友慢慢打出来一个问号。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

好在郭某反响比较快,第一时间报警。于是在警方和银行联动下,仅用时10分钟就成功拦截了330多万元上圈套资金。

有网友表明,AI正成为骗子高手新一代东西。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

还有网友戏弄道,我没钱,哪个都骗不了我。(等等,老友有钱也不行doge)

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

而在这起案子背面,核心触及了AI换脸以及语音组成这两个技能。

大众所熟知的AI换脸方面,现在即使一张2D相片,就能让口型动起来。据此前新华每日电讯音讯,组成一个动态视频,成本也仅在2元至10元。

其时涉案嫌疑人表明:“客户”往往是成百上千购买,牟利空间巨大。

至于面向更精准、更实时的大型直播渠道,视频实时换脸的全套模型购买价格在3.5万元,而且不存在延迟、也不会有bug。

至于像语音组成方面,技能作用也是越来越逼真,新模型和开源项目涌现。

前段时间,微软新模型VALLE炸场学术圈:只需3秒,就可以仿制任何人的声响,乃至连环境布景音都能模仿。

而具有语音组成功用的东西Bark,更是曾登顶GitHub第一,除了声色挨近真人,还能参加布景噪音和高度拟真的笑声、叹气和哭泣声等。

在各类社交网络上,各种小白教程也层出不穷。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

要是结合虚拟摄像头,或许就更加防不胜防。

只需一个软件应用程序,就可以在视频通话中使用任意视频资源。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%
图源微博@哑巴

点击接通后,对方彻底不会看到播映、暂停视频等具体操作,只会看到视频播映的作用,“接通后看到的便是美人了”:

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%
图源微博@哑巴

这样一来,不只视频可以经过虚拟摄像头,随意拍照乃至更换,乃至连说话方法都可以真人定制:

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%
图源微博@哑巴

核心技能门槛的下降,也就给了犯罪分子待机而动。

AI新骗局成功率挨近100%

事实上,AI加持下的新式网络欺诈,并不止这一种操作。

无论是国内还是国外,都有不少用AI换脸的欺诈事例,小到在网络购物、兼职刷单等方面骗点小钱,大到假充客服、出资理财人员等身份,获取银行卡账号密码直接转一大笔账,都有呈现。

在国内,据南京警方音讯,此前就呈现过一同被QQ视频AI欺诈3000元的事例。

当事人小李表明,自己的大学同学小王经过QQ跟自己借3800元,称自己很着急,因为表姐住院了。

小李置疑了小王的身份,而小王很快给她传来了一个4~5秒左右的动态QQ视频,不只布景在医院,而且还打了声招呼。

这让小李打消了疑虑并转了3000元,但是随后发现对方现已将她删除拉黑,发现视频原来是AI伪造的。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

现在包括北京反诈、武汉市反电信网络欺诈中心等官方大众号渠道,都警告了AI技能新骗局的严重性,乃至表明“欺诈成功率挨近100%”。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

可别以为这些欺诈现象只在国内呈现,国外的语音欺诈相同花样百出。

一种方法是用AI组成语音骗取电话转账

据Gizmodo介绍,英国最近就相同发生了一同触及金额高达22万英镑(折合人民币约192.4万元)的欺诈案子。

一位当地能源公司的CEO,在不知情的情况下上圈套子“DeepFake”了自己的声响。随后,骗子用他这段声响,电话转账了22万英镑到自己的匈牙利账户。

据CEO表明,他后来自己听到这段AI组成语音时都惊奇了,因为这段语音不只模仿出了他平时说话的语调,乃至还带有一点他的口癖,有点像是某种“奇妙的德国口音”。

另一种则是用组成语音假充亲友身份

据nbc15报道,美国一位名叫Jennifer DeStefano的母亲,最近接到了一个自称是“绑匪”的欺诈电话,对方称绑架了她15岁的女儿,要求这位母亲交出100万美元的赎金。

电话那头传来了女儿的“呼救声”,不只声响、就连哭声都非常相似。幸运的是她的丈夫及时证明了女儿是安全的,这次欺诈才没能成功。

现在,不只是欺诈,在AI技能加持下,就连杨幂、迪丽热巴们都在今天引发了热议。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

原来,这是商家们想出的新“搞钱之道”,那便是在直播的时候,用AI换脸等技能“Deepfake”一下杨幂、迪丽热巴、Angelababy等明星的脸,这样大家就会误以为是明星自己在带货,从而拉升直播流量。

但是,这类行为现在还不能被直接断定为侵权。据21世纪经济报道,北京云嘉律师事务所律师赵占领表明:

渠道关于渠道内商家的侵权行为不承担直接侵权的责任,而是否构成帮助侵权,主要是看渠道关于商家的侵权行为是否属于明知或应知。

但关于如何断定渠道对用户、权利人的投诉是否明知或应知,在一般情况下很难确定。

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

明显,在AI技能越来越炽热的当下,相关法律也还需求进一步完善。

One More Thing

就在昨天夜里,最近火爆全网的“AI孙燕姿”自己,也便是歌手孙燕姿,出来回应了。

她发布了一篇名为《我的AI》的英文版文章,这是她团队的中文翻译全文:

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%

然后,网友们看到后的评论是酱婶的:

和AI网聊10分钟被骗430万,真实诈骗案震惊全网,官方:AI诈骗成功率接近100%
图源微信@南方都市报

参阅链接:
[1]mp.weixin.qq.com/s/Ije3MyQxN…
[2]mp.weixin.qq.com/s/kcbNlaFe_…
[3]gizmodo.com/deepfake-ai…
[4]www.nbc15.com/2023/04/10/…
[5]weibo.com/1796087453/…
[6]weibo.com/1420862042/…