bet356体育bet356体育bet356体育前有AI论文造假和新闻造假，后有疑似AI换脸的杨幂、迪丽热巴出现在直播间卖货。昨日内蒙古包头的一起“AI电信10分钟骗走430万”登上微博热搜，引起全民关注。

　　随着AI技术掀起新一波落地潮，AI深度伪造（DeepFake）内容在全球范围内病毒式传播，引起产业的强烈担忧。

　　早在2019年，智东西就调查报道过深度伪造AI换脸黑产。近年来，深度伪造技术与反深度伪造技术的博弈持续不断，相关部门也逐步完善监管法律法规。当下，随着以GPT-4为代表的AI大模型技术迭代进化，深度伪造内容正卷土重来，从而在全球掀起更大的风浪。

　　从文章到图片，从人声到视频的动态效果都能被最大程度还原，瞒天过海骗过公众，更有各种套路层出不穷、防不胜防。这些AI伪造内容对很多年轻人来说都真假难辨，老人、小孩则更容易上当受骗。而一旦他们的信任被不法分子用来违法犯罪，后果不堪设想。

　　有AI技术专家告诉智东西，对于目前这些AI深度伪造技术生成的音视频等内容，普通人用肉眼来鉴别的难度非常之大。

　　传统骗局换上了一件由AI包裹的“新外衣”，更为隐蔽也更加让人防不胜防。这些AI新骗局是如何骗人的？难辨真假的AI伪造内容需要怎么去识破？产业乱象又有什么样的解法？通过对市面上各种AI新骗术进行梳理分析，本文对这些问题进行了深入探讨。

　　今年3月，一份名为《暂停大型人工智能研究》的公开信在未来生命研究所官网上发布，包括特斯拉CEO埃隆·马斯克（Elon Musk）、苹果公司联合创始人史蒂夫•沃兹尼亚克（Steve Wozniak）等人在内的千名科学家、企业高管签字呼吁暂缓GPT-4以上版本的研发，他们矛头所指都是强大AI技术可能的负面用途。

　　AI负面用途的爆发远快于我们的想象。随着AI技术能力加速迭代和落地，AI伪造变得更加容易、内容也更为逼真，随之而来的是假新闻、假图片络绎不绝，变声、换脸造成的恶性事件引发社会担忧。很多人感到，“有图有”、“眼见为实”的常识似乎受到了有史以来最猛烈的冲击。

　　近日，内蒙古包头市自治区公安局网侦部门侦破一起利用AI进行电信的案件，罪犯假借好友名义称自己急需用钱，并拨打微信视频联系这位受害者郭先生。

　　出于对于好友的信任，再加上已经视频聊天核实了对方的身份，郭先生放松了警惕，分两笔汇款将430万打到了罪犯的上，但他万万没想到所谓的微信视频通话中的“好友”是由AI换脸技术制作而成的。罪犯利用AI换脸技术，佯装成好友对他进行电信。目前在警方拦截下，已追回336.84万元，仍有93.16万元已被转移走。

　　AI换脸是最容易获取对方信任的一类手段，者往往利用AI技术换脸成受害者熟悉的人，并拨打电话和对方确认信息。

　　面对这类新型方式，一是需要保护好个人信息，不轻易提供任何涉及个人隐私的信息给他人，不随意点进陌生链接、下载陌生软件；二是要通过各种渠道核验对方身份，对潜在风险保持警惕。

　　和“AI换脸”功能极为相似的是“AI”。早在今年3月，一则“女子地铁照被AI一键传播”的新闻冲上了热搜，一名女性搭乘地铁时的一张照片被人用AI软件“一键”，遭到恶意传播，罪犯还广泛散布不实信息对该女子进行污蔑。

　　这样的“一键”技术早在2019年时就已在国外出现，但因广泛的争议和声讨，项目迅速关闭下架。这股不良之风在今年的AI热中再次吹到国内，在网络上以“AI”、“换装”、“软件”等关键词组合搜索时仍能出现不少隐藏极深的相关软件，有心者甚至用此来制作、传播淫秽视频，AI视频变装服务已成为一门链条完整的黑色产业。

　　“AI换脸”在此前已被大量使用到影视剧二度创作、趣味视频、表情包制作当中，但其中隐藏的法律风险和侵权纠纷依旧不容忽视。近期，据企查查官网信息显示，上海鱼腥草信息科技有限公司就因旗下一款换脸手机APP而遭多位网红博主起诉。

　　早些时候，一位名为“特效合成师洪亮”的视频博主在自己的视频中，将电视剧《你是我的荣耀》中男主演杨洋的脸，通过AI换脸技术换成了自己的脸，最终遭到主演粉丝的追打，从而引起了不少网友的注意。

　　这位视频博主以换脸男明星为噱头，实则是给自己的影视特效制作付费课程引流，但行为上已经给出演电视剧的演员迪丽热巴、杨洋等人造成了侵权。《狂飙》爆火之后，也有不少粉丝将剧情片段与电视剧版《西游记》换脸进行二度创作，在传播度和话题讨论上为电视剧又贡献了一波热度，但却对出演电视的演员造成了一定困扰。

　　蹭流量的行为，无论是对被换脸的明星，还是对技术充满好奇的公众，都产生了不良的影响和困扰，娱乐和技术之间的界限不应模糊至此。

　　前有“AI孙燕姿”爆火，后有AI人声克隆闯入配音圈，AI的声音合成技术被炒得火热，也衍生出不少的恶性事件和相关受害者。

　　一位网友用美国知名歌手弗兰克·奥什（Frank Ocean）的歌曲片段训练出来仿冒其音乐风格的歌曲，并在地下音乐论坛上发布了这些“音乐作品”，还将这些歌曲伪造成是在录音时不小心泄露的版本，最终蒙混过关，卖出了近970美元（折合为6700元人民币）的价格。

　　不久之前，西班牙的一家电影制作公司Peabody Films也遭受了AI电话的，者伪装成著名演员“卷福”本尼迪克特•康伯巴奇（Benedict Cumberbatch）向公司称对公司的电影很感兴趣，有合作意向，但需要公司先转20万英镑（折合约170万人民币）的定金，之后再谈具体的合作细节。

　　海外还有不少利用AI克隆声音进行勒索的新闻，部分案件涉案金额令人咋舌，高达百万美金。这类者往往通过电话录音等素材提取某人的声音进行声音合成，再利用伪造后的声音来骗过熟人，就这需要公众对陌生电话保持警惕，即使是熟人也可能被伪造声音。

　　美国CBS电视台的电视新闻杂志节目60 Minutes在5月22日的最新一期节目中，现场展示了黑客是怎样克隆声音来骗过同事，并成功窃取护照信息的。

　　仅用了5分钟时间，黑客就通过AI克隆复制了Sharyn的声音，并通过工具替换了手机上来电显示的名称，成功骗过了她的同事，轻而易举地得到了她的姓名、护照号码等私人信息。

　　美东时间5月22日，一张五角大楼附近地区发生爆炸的图片在社交媒体上疯传。这张虚假照片的广泛流传，甚至导致标普500指数短线%至盘中低点，由涨转跌。

　　365体育手机版入口

　　随后美国国防部发言人立即证实，这同样是一张由AI生成的虚假图片，这张图具有明显的AI生成特征，比如路灯有些歪，围栏长在了人行道上等。

　　照片中的特朗普被包围，又按倒在地，看上去狼狈又慌乱。在听证会上，他掩面痛哭，还在潮湿阴暗的囚房中穿上了狱服。这些图片由公民记者网站Bellingcat的创始人艾略特·希金斯（Eliot Higgins）用Midjounrney制作而成。组图发出后，他的账号也随之被封查。

　　“特朗普被捕图”发出不久之后，教皇方济各穿着巴黎世界羽绒服走秀的照片在网上引起轩然大波，发出不久后便有了2800多万的点击量，让不少网友都信以为真。

　　创作者巴勃罗·泽维尔（Pablo Xavier）称，自己完全没想到这组图片居然会走红，自己只是突然想到了巴黎世家的羽绒服、巴黎或者罗马的街道等。

　　Reddit论坛上的Midjourney板块中，一组“2001年卡斯卡迪亚9.1级大地震，引发的海啸摧毁了俄勒冈州”被大面积传播，照片当中的受灾现场一片混乱，救灾人员、新闻记者、政府官员等人相继出现，人们面带忧虑、惊恐和慌张。但实际上这完全是一场AI引发的“灾难”，历史上并不存在。而这些要素齐全、颜色真实的图片场景让人看上去难辨线、编撰新闻：AI成为谣言炮制机

　　然而事情在一位驻韩记者以及美国广播电台iHeartRadio提出质疑后全面反转：该男子可能压根就不存在。网友将其照片拿去AI内容检测网站查证后发现，照片有75%的可能性是AI生成的，韩国MBC电视台求证警方后也得到了“未收到类似死亡案例报告”的回复，这则新闻立刻被证实为“AI造假新闻”。

　　最早是因为AI翻唱而重新进入大众视野的歌手孙燕姿，因其独特的音色和唱腔风格和多首热门歌曲都有极高的适配度，在网友的AI技术下，她“翻唱”的《发如雪》《下雨天》《我记得》等歌曲播放量均破百万。

　　据中国新闻网报道，近日，有多个直播间都开始采用AI换脸明星的方式进行直播带货，女明星如杨幂、迪丽热巴、Anglebaby等人成了重点换脸对象，明星脸的带货主播能达到更好的引流效果，并节省广告宣传成本，消费者或明星粉丝可能会冲着明星效应进行消费而被坑骗。

　　AI换脸线年初，一段通过AI技术将《射雕英雄传》中黄蓉扮演者朱茵的脸替换为杨幂的视频在网络上热传，有网友表示毫无违和感，也有网友提出可能会侵犯原扮演者的肖像权，制作者肖先生对此回应称：主要适用于技术交流，不会用于营利行为。

　　365体育手机版入口

　　365体育手机版入口

　　很多人的肖像、声音在未经允许的情况下被传播，影音产品在未谈版权的情况下被拿来使用牟利，更有甚者是违法分子利用伪造信息进行财产甚至绑架勒索，损害人们的人身及财产权益。

　　面对这些更加恶劣的情况，人们需要拿起法律的武器保护自己，由此而来的将是一场有利于产业发展的大型AI普法运动。

　　面部和声音的伪造横行，首先面临的是个人隐私侵权问题。根据《民法典》第一千零一十九条：“任何组织或者个人不得以、污损，或者利用信息技术手段伪造等方式侵害他人的肖像权。未经肖像权人同意，不得制作、使用、公开肖像权人的肖像，但是法律另有规定的除外。”同时，“对自然人声音的保护，参照适用肖像权保护的有关规定。”而让人们更担心的是，伪造信息如果落到不法分子手里，可能会进一步利用信任侵害人们的财产权甚至是健康权。

　　365体育手机版入口

　　除了人身权利，AI伪造内容涉及的影音素材的版权侵权问题也备受关注。近期，歌手孙燕姿发文称表示了对“AI孙燕姿”淡然处之，但更多的被伪造的人选择拿起法律武器保护自己，比如据媒体报道，上海鱼腥草信息科技有限公司因某款换脸手机APP被多位网红博主起诉。

　　上海大邦律师事务所高级合伙人、知识产权律师游云庭撰文称，根据知识产权法律，用真人语音训练人工智能并生成歌曲，如果不做商用，大概率不侵权，但发布在网上还是应当先拿到相关的词曲著作权、伴奏音乐、视频使用素材的授权。人工智能生成的作品有先天的版权瑕疵，不应当享有著作权并收取授权费用。用户使用人工智能生成的作品如果被他人侵权，可以依据《反不正当竞争法》维权。

　　实际上，我国一些人工智能领域的专门法规也已有规定。国家网信办等部门已经在2022年12月颁布《互联网信息服务深度合成管理规定》，用25条规定划定深度合成技术使用规范，包括不得利用深度合成服务侵犯他人合法权益等法律、应用程序分发平台应当落实上架审核、服务提供和技术支持者应当加强技术管理等规定。

　　“造假”和“打假”并不是因AI而产生，但今天的AI技术让“造假”变得更容易且更难以分辨。面对扑面而来的AI伪造内容，人们自己有没有能够去识别的技巧？

　　知名安全公司瑞莱智慧RealAI联合创始人、算法科学家萧子豪告诉智东西，目前深度伪造技术在不断进化，生成的声音和视频越来越逼真，普通人肉眼鉴别的难度非常大。

　　“普通人如果遇到这类情况，可以在视频时有意识地引导对方做一些动作，如：大幅度地摇头或张嘴。如果骗子技术手段较弱，那么我们有可能发现对方面部边缘或者牙齿的瑕疵，从而识别出AI换脸。不过，这个方法对于识别出‘高水平’的分子，还存在难度。此外，还可以追问几个只有你与借款者之间才知道的私密信息，来核实对方身份。”

　　“在防止自己上当受骗的同时，还要注意保护好个人图像，尽量避免在公开平台大量晒自己的照片和视频，给不法分子提供便利。因为，深伪视频制作的原材料是个人图片、视频，这些数据越多训练出的视频也就越逼真、越难以鉴别。”萧子豪补充说。

　　苹果公司联合创始人史蒂夫·沃兹尼亚克（Steve Wozniak）近日在一次采访中警告称，AI内容应该被明确标记，并且需要对该行业进行监管。任何由AI生成内容都应该由发布者来承担责任，但不代表大型科技公司可以逃脱法律制裁，沃兹尼亚克认为，监管机构应该追究大型科技公司的责任。

　　根据我国颁布的《互联网信息服务深度合成管理规定》，内容提供者需要按照对生成的图片、视频等内容进行标识等。实际上，我们已经看到小红书等国内社交平台标记了疑似AI生成内容，能起到一定预防作用。但AI生成内容的最后一个关口还在用户自己，媒体平台只能起一个过滤作用。bet356体育亚洲官网入口bet356体育亚洲官网入口bet356体育亚洲官网入口bet356体育亚洲官网入口