您当前的位置:首页 > 电脑百科 > 安全防护 > 诈骗

防范“AI换脸”诈骗 你需要的知识都在这儿了

时间:2024-02-28 09:17:18  来源:央视网  作者:

近年来,随着人工智能技术的进步,一些不法分子开始利用AI技术融合他人面孔和声音,制造非常逼真的合成图像来实施新型网络诈骗,这类骗局常常会在短时间内给被害人造成较大损失。我们应该如何看清这类AI“深度造假”?辨别“AI换脸”有没有什么好方法?我们先来看看近期发生在陕西西安的一起“AI换脸”诈骗案例。

陕西西安财务人员张女士与老板视频通话,老板要求她转账186万元到一个指定账号。

被害人 张女士:老板让把这个款赶紧转过去,这个款非常着急,因为他声音还有视频图像都跟他人长得一样的,所以就更确信这笔款是他说的了,然后我直接就把这笔款转了。

转账之后,张女士按照规定将电子凭证发到了公司财务内部群里,然而出乎意料的是,群里的老板看到信息后,向她询问这笔资金的来由?

被害人 张女士:然后我们就打电话再跟老板去核实,老板说他没有给我发过视频,然后也没有说过这笔转账。

意识到被骗的张女士连忙报警求助,警方立刻对接反诈中心、联系相关银行进行紧急止付,最终保住了大部分被骗资金156万元。

AI“多人换脸”诈骗案 骗走2亿港元

一百多万的现金,对大部分人来说都算是一笔巨款了,好在警方处理及时,挽回了大部分损失,下面我们再来看另一起案例,这起案例的“换脸”技术难度更高,涉案金额也更大。近期, 香港警方也披露了一起AI"多人换脸"诈骗案,涉案金额高达2亿港元。

在该起案件中,一家跨国公司香港分部的职员,受邀参加总部首席财务官发起的多人的视频会议。并按照要求,前后转账多次,将2亿港元转账到5个本地银行账户内,其后向总部查询方知受骗。警方调查得知,这起案件中,所谓的视频会议中,只受害者一人为“真人”,其余所谓参会人员,全部是经过AI换脸后的诈骗人员。

看完这两起案例,您一定有些好奇,AI换脸背后的技术原理到底是什么?在技术层面,它是如何实现人脸的精确识别与替换,创造出逼真效果?我们来听听专家的讲解。

技术上如何实现人脸精确识别与替换

中国网络空间安全协会人工智能安全治理专委会专家 薛智慧:AI换脸过程主要包括人脸识别追踪、面部特征提取、人脸变换融合、背景环境渲染、图像与音频合成等几个关键步骤。其背后最核心的包括为三个部分,首先,利用深度学习算法精准地识别视频中的人脸图像,并提取出如眼睛、鼻子、嘴巴等关键面部特征。其次,将这些特征与目标人脸图像进行匹配、替换、融合。最后,通过背景环境渲染并添加合成后的声音,生成逼真度较高的虚假换脸视频。

快速AI“换脸”仅通过一张照片就可完成

为了了解AI换脸到底能有多么逼真,记者经过与专业技术人员合作,深度体验了AI换脸技术。

技术人员首先用手机给记者拍了一张脸部照片,导入到AI人工智能软件后,让记者惊讶的是,虽然电脑摄像头前的是技术人员,但是输出的确是记者的照片,几乎可以说是“一键换脸”,不需要复杂的环境和解压操作。

更令人惊讶的是,随着技术人员面部表情变化,照片上记者的脸也跟着一起发生了相应变化。

记者:为什么技术人员这张脸动,我的照片会跟着动呢?

中国网络空间安全协会人工智能安全治理专委会专家 薛智慧:首先通过视频的采集,能够把图片里这个人脸的面部追踪定位到,定位到以后第二步他能够做一个人脸的面部特征点的采集和提取,主要就是包括嘴、鼻子跟眼睛相关的这些明显的面部特征。采集到以后, 第三步就跟把这张原始的照片,做一个变换跟融合跟整形。

记者:通过这张照片还可以做到什么?

中国网络空间安全协会人工智能安全治理专委会专家 薛智慧:当前通过这张照片技术人员已经让这张照片能够动起来,活起来了,而如果更进一步的将这张照片存下来,能够存储大量的照片的话。后期可以把这张照片合成一段简短的视频发布出来。

人工智能人脸检测技术主要通过深度学习算法实现,这种技术能够识别出面部特征并对其进行精准的分析。可以将一个人的面部表情从一张照片或视频中提取出来,并将其与另一个人的面部特征进行匹配。专家告诉记者,如果想要实现视频实时通话时采用人工智能AI换脸技术,一张照片是远远不够的,那就需要不同角度的近千张照片的采集。

中国网络空间安全协会人工智能安全治理专委会专家 薛智慧:如果要实时点对点交流的话,需要再采集更多的照片,完了进行深度学习算法模型的训练,训练出来这个模型以后灌到咱们这个视频里去,就可以做实时的变化跟转换了。这种情况下,就可以做到实时的变脸。声音的交流也可以,需要预先采集一些咱们目标人群当中的声音,然后进行模型的训练,能够把目标人群的声音还原出来。

AI生成仿真度极高视频 难度高投入大

专家介绍,以诈骗为目的,实施点对点视频通话,需要AI人工智能生成仿真度极高的视频。想要达到以假乱真效果用于诈骗,难度不小。

中国计算机学会安全专业委员会数字经济与安全工作组成员 方宇:针对诈骗,其实主要是通过点对点的视频通话,这时候如果采用换脸技术和声音合成做实时的换脸诈骗的话,想要完成这些技术操作,就需要投入很强的技术支持。

中国网络空间安全协会人工智能安全治理专委会专家 薛智慧:背后需要有大量的资金的投入,包括图片的采集,包括专业算法的人员等等,需要很长的一个周期,包括一些算力算法。各方面的投入,需要长时间不断地迭代,进行操作,才能达到一个相当逼真的效果,才有可能实现到诈骗的实际效果。

目前AI“换脸”更多应用于娱乐视频录制

除了一些不法分子企图利用AI技术实施诈骗,事实上,近年来,AI技术更多地被应用于短视频的二次创作,属于娱乐性质,越来越多的名人AI换脸视频出现在网络上,不少网友感叹,这类视频“嘴型、手势都对得上,太自然了,差点儿以为是真的。”

比如这款软件,拍下记者面部照片后,就能录制生成出一段记者秒变赛车手的视频。

中国计算机学会安全专业委员会数字经济与安全工作组成员 方宇:AI技术目前我们常看到的主要是短视频换脸,通过做一些特定的动作,跳舞啊等等。这些视频其实看起来是有一些不自然的,本身也是纯属于娱乐性质的换脸。

记者发现在手机应用商城中,有数十款换脸软件,都可以做到换脸的目的。

中国网络空间安全协会人工智能安全治理专委会专家 薛智慧:如果从娱乐大众的角度来说的话,现在市面上也有很多的这些软件和工具,能够达到AI换脸的效果,但是仿真度只有六七分的样子,大众直接就能看出来。但是如果要生成一个诈骗视频来说话,就要生成咱们仿真度极高的这种点对点视频。

AI技术“换脸换声”可能存在法律风险

不过,AI技术也是把“双刃剑”,即使是出于娱乐使用AI换脸、AI换声,也是存在法律风险的。法律专家表示,用AI技术为他人换脸换声甚至翻译成其他语言并发布视频,可能涉嫌侵权,主要有三个方面:

一是涉嫌侵犯著作权,例如相声、小品等都属于《中华人民共和国著作权法》保护的“作品”。例如网友用AI软件将相声、小品等“翻译”成其他语言,需经过著作权人授权,否则就存在侵权问题。

二是涉嫌侵犯肖像权,根据《中华人民共和国民法典》,任何组织或者个人不得以丑化、污损,或者利用信息技术手段伪造等方式侵害他人的肖像权。未经肖像权人同意,不得制作、使用、公开肖像权人的肖像,但是法律另有规定的除外。

三是涉嫌侵犯声音权,根据《中华人民共和国民法典》规定,对自然人声音的保护,参照适用肖像权保护的有关规定。也就是说,需要取得声音权人的同意,才能够使用他人的声音。

学会几招 轻易识别AI“换脸换声”

AI换脸这一技术的出现,导致耳听为虚、眼见也不一定为实了。那我们该如何防范呢?专家表示,其实AI人工换脸无论做得多么逼真, 想要识别视频真假还是有一些方法的。

中国计算机学会安全专业委员会数字经济与安全工作组成员 方宇:实际上从我目前看到的深度伪造的实时视频上来看,其实还是可以通过一些方式,去进行一些验证。

那比如说我们可以要求对方在视频对话的时候呢,在脸部的面前通过挥手的方式,去进行一个识别,实时伪造的视频,因为它要对这个视频进行实时的生成和处理和AI的换脸。

那么在挥手的过程中,就会造成这种面部的数据的干扰,最终产生的效果就是我们看到的这样,挥手的过程中,他所伪造的这个人脸会产生一定的抖动或者是一些闪现,或者是一些异常的情况。

第二个就是点对点的沟通中可以问一些只有对方知道的问题,验证对方的真实性。

提高防范意识 避免个人生物信息泄露

专家表示,除了一些辨别AI换脸诈骗的小诀窍,我们每一个人都应该提高防范意识,在日常生活中也要做好相关防范措施,养成良好的上网习惯。首先应该是做好日常的信息安全的保护,加强对人脸、声纹、指纹等生物特征数据的安全防护:另外做好个人的手机、电脑等终端设备的软硬件的安全管理。第二,不要登录来路不明的网站,以免被病毒侵入。第三,对可能进行声音、图像甚至视频和定位采集的应用,做好授权管理。不给他人收集自己信息的机会,也能在一定程度上让AI换脸诈骗远离自己。

伴随AI技术发展 需要多层面监管规范

除了要提高自我防范意识,如何对AI技术加强监管,也成了越来越多人关注的问题。AI技术本身不是问题,关键是我们要怎么用它?如何形成有效监管?专家介绍,AI技术发展,需要多层面监管规范。

一是在源头端,需要进一步加强公民个人信息保护,尤其是加强对生物特征等隐私信息的技术、司法保护力度。二是在技术层面可以加强管理。例如可以让视频传播网站或者社交软件,使用专业的鉴别软件来鉴定,对AI生成视频,打上不可消除的“AI生成”水印字样。目前,这种数字水印鉴伪技术有待进一步普及。三是在法律制度层面,要进一步完善人工智能等领域相关法律法规。2023年8月15日,我国正式施行《生成式人工智能服务管理暂行办法》。《办法》从多个方面“划下红线”,旨在促进生成式人工智能健康发展和规范应用。



Tags:AI换脸”   点击:()  评论:()
声明:本站部分内容及图片来自互联网,转载是出于传递更多信息之目的,内容观点仅代表作者本人,不构成投资建议。投资者据此操作,风险自担。如有任何标注错误或版权侵犯请与我们联系,我们将及时更正、删除。
▌相关推荐
“只要能看到脸的都能换” 滥用“AI换脸”技术伪造女明星涉黄视频 法院判了!
“AI换脸”相信大家都不陌生。只需要一张照片,通过人工智能深度合成技术,任何人都能成为视频中的主人公,甚至连表情和动作都能以假乱真。然而,这项新技术,却让一些人产生了不良想...【详细内容】
2024-03-22  Search: AI换脸”  点击:(11)  评论:(0)  加入收藏
ATFX:警惕“AI换脸”诈骗,眼见不一定为实
各位朋友们,请务必提高警惕!最近,福建省一家科技公司的法定代表人郭先生遭遇了令人震惊的诈骗案件。他仅仅接了一通视频电话,就被不法分子骗走了高达430万元的巨款。据了解,2023...【详细内容】
2024-03-15  Search: AI换脸”  点击:(17)  评论:(0)  加入收藏
“AI换脸”诈骗防不胜防
转自:北京商报员工被要求向指定账户转账,老板却是AI换脸后的“冒牌货”?就在2月,一则涉案金额高达2亿港元的AI换脸诈骗案引发了高度关注。如果说2023 年是生成式AI的元年,那么202...【详细内容】
2024-03-15  Search: AI换脸”  点击:(19)  评论:(0)  加入收藏
防范“AI换脸”诈骗 你需要的知识都在这儿了
近年来,随着人工智能技术的进步,一些不法分子开始利用AI技术融合他人面孔和声音,制造非常逼真的合成图像来实施新型网络诈骗,这类骗局常常会在短时间内给被害人造成较大损失。我...【详细内容】
2024-02-28  Search: AI换脸”  点击:(28)  评论:(0)  加入收藏
“AI换脸”或可预防?一起来看高科技如何“打败”高科技
人民网福州9月12日电 (黄东仪、林晓丽)9月11日,由中央宣传部、中央网信办、教育部、工业和信息化部等十部门联合举办的2023年国家网络安全宣传周在福建福州正式拉开序幕。作...【详细内容】
2023-09-12  Search: AI换脸”  点击:(265)  评论:(0)  加入收藏
“AI换脸”,515人落网!何种诈骗发案率最高?如何才能“道高一丈”
电信网络诈骗花样翻新 如何守好“钱袋子”?一公司法人代表被骗子利用人工智能“换脸”技术诈骗430万元,某单位一工作人员被“假领导”诈骗近98万元……近期,多起电...【详细内容】
2023-08-11  Search: AI换脸”  点击:(144)  评论:(0)  加入收藏
公安部:严打泄露身份证照片等犯罪,破获“AI换脸”案79起
中新经纬8月10日电 公安部网络安全保卫局副局长李彤10日表示,依托“净网”专项行动,组织专项会战,严打泄露身份证照片等图像信息的犯罪源头,破获“AI换脸”案件79起,抓获犯罪嫌疑...【详细内容】
2023-08-10  Search: AI换脸”  点击:(370)  评论:(0)  加入收藏
“AI换脸”简单好玩,但有可能涉及侵权
□ 本报记者   罗莎莎□ 本报通讯员 吴玥近年来,随着科学技术不断发展,通过AI技术进行图像、视频、音频的深度合成的情况也逐渐增多。在大部分情况下,网友只要在某些提供“AI...【详细内容】
2023-07-02  Search: AI换脸”  点击:(73)  评论:(0)  加入收藏
“AI换脸”诈骗,怎么防?
点开直播间乍一看,卖货的竟是当红女星。再定睛一看,“明星”其实是使用人工智能(AI)实时换脸技术的普通主播。他们冒充明星艺人,只为增加卖点,助力卖货……近期,“AI换...【详细内容】
2023-05-25  Search: AI换脸”  点击:(70)  评论:(0)  加入收藏
利用“AI换脸”等音视频诈骗案件多发
今年以来,ChatGPT和GPT-4等技术的应用成为信息科技领域的热点,引起公众对AI技术的广泛关注和热情。昨日,中国互联网协会发文称,伴随着深度合成技术的开放开源,深度合成产品和服务...【详细内容】
2023-05-25  Search: AI换脸”  点击:(121)  评论:(0)  加入收藏
▌简易百科推荐
官方通报电诈新套路:男子因机票退改签险些损失375万
快科技4月6日消息,据“海宁公安”官方公众号介绍,近期有一男子到尖山派出所求助,称自己遇到诈骗。据介绍,对方自称是航空公司客服,说周先生的航班推迟了,可以帮他退票。但是会扣除...【详细内容】
2024-04-07    快科技  Tags:电诈   点击:(3)  评论:(0)  加入收藏
银行卡在手里,钱怎么被人刷光了?
日常生活中,我们在使用信用卡时,难免会遇到需要挂失或补发的意外时刻。各大银行为了方便客户,通常会对此提供线上快捷服务,但这些便民服务却成为了不法分子眼中可以钻的空子。日...【详细内容】
2024-03-24    紫牛新闻  Tags:银行卡   点击:(6)  评论:(0)  加入收藏
“知识付费”诈骗超千万元 上海警方侦破“直播授课”诈骗案
中新网上海3月19日电 (记者 李姝徵)无门槛0元学剪辑课,帮助开通“橱窗”功能,精准推送粉丝群体,轻松获取高额收益……直播间内购买所谓课程后,却发现只花钱不赚钱。...【详细内容】
2024-03-19    中国新闻网  Tags:知识付费   点击:(21)  评论:(0)  加入收藏
警惕老骗术新“马甲”!起底民族资产解冻类诈骗套路
我们来看看这样一批投资项目:中央数字货币、数字经济养老……怎么样,看着是不是挺高大上的?如果再有人告诉你,“这项目的资金主要来自国家,属于国家机密,千万不要告诉...【详细内容】
2024-03-17    央视网  Tags:骗术   点击:(16)  评论:(0)  加入收藏
“AI换脸”诈骗防不胜防
转自:北京商报员工被要求向指定账户转账,老板却是AI换脸后的“冒牌货”?就在2月,一则涉案金额高达2亿港元的AI换脸诈骗案引发了高度关注。如果说2023 年是生成式AI的元年,那么202...【详细内容】
2024-03-15    北京商报  Tags:AI换脸   点击:(19)  评论:(0)  加入收藏
防范“AI换脸”诈骗 你需要的知识都在这儿了
近年来,随着人工智能技术的进步,一些不法分子开始利用AI技术融合他人面孔和声音,制造非常逼真的合成图像来实施新型网络诈骗,这类骗局常常会在短时间内给被害人造成较大损失。我...【详细内容】
2024-02-28    央视网  Tags:AI换脸”   点击:(28)  评论:(0)  加入收藏
套个白大褂,假装是医生!警惕网络“伪科普”伤人
套个白大褂,假装是医生!警惕网络“伪科普”伤人半月谈记者 梁姊 闵尊涛 杨稳玺 陈柱佐“每两个人里就有一个带有幽门螺旋杆菌”“孩子用嘴呼吸是腺样体肥大,一定要早治疗”“尿...【详细内容】
2024-02-23    新华社  Tags:伪科普   点击:(40)  评论:(0)  加入收藏
香港发生罕见AI诈骗案 涉案金额高达1.84亿人民币
近日,中国香港发生了一起规模巨大的AI“深伪”诈骗案,涉案金额高达1.84亿人民币。该案件引起了广泛关注,成为香港历史上损失最惨重的“变脸”案例,并首次涉及到了使用AI技术进行...【详细内容】
2024-02-06    中关村在线  Tags:AI诈骗   点击:(56)  评论:(0)  加入收藏
新手段!收到退税邮件别点
据@上海反诈中心 消息,近日有不法分子通过非法手段,盗取企业或个人邮箱,冒充公司人员向员工发邮件。以退税申报、工资补贴等名目,诱导受害人扫码登录钓鱼网站。员工收到公司邮箱...【详细内容】
2023-12-26    国是直通车  Tags:退税邮件   点击:(122)  评论:(0)  加入收藏
FaceTime来电诈骗如何破?专家:暂无有效拦截方法,建议关闭功能
多地公安部门近日发布多起FaceTime来电诈骗案例,提醒市民注意类似骗局。此前,宁波市反诈中心夏琳曾向记者介绍,随着技术的发展,诈骗的手段也在迅速变化。用FaceTime拨号的诈骗案...【详细内容】
2023-12-14    澎湃新闻  Tags:FaceTime   点击:(154)  评论:(0)  加入收藏
站内最新
站内热门
站内头条