点击右上角微信好友

朋友圈

请使用浏览器分享功能进行分享

正在阅读:从恶搞名人到诈骗作恶,AI换脸背后谨防技术失控
首页> 数字化频道> 要闻 > 正文

从恶搞名人到诈骗作恶,AI换脸背后谨防技术失控

来源:光明网2025-02-25 18:14

网络强国·百人谈

  从之前的恶搞企业家雷军,到不久前AI制作张文宏医生音视频为自己带货,甚至还有不法分子利用AI深度合成视频进行诈骗。在AI技术飞速发展的今天,你是否能确定视频通话中的人,真的如画面所示?如今,通过大模型技术,仅需一张照片、一段视频或语音,就能将另一段视频中人物的面容及声音完全替换,甚至可以直接应用到实时直播视频之中。

从恶搞名人到诈骗作恶,AI换脸背后谨防技术失控

  中关村现代信息消费应用产业技术联盟副理事长 包冉:如果在没有经过被使用人、团队或机构的合法授权,从而进行的通过深度合成技术换脸的行为,显然已经构成了侵犯他人名誉权、肖像权、个人隐私权等合法权利的严重嫌疑。

  我国对于AI合成技术,已经作出了较为充分的规定。比如,国家网信办联合多部委发布的《互联网信息服务深度合成管理规定》《生成式人工智能服务暂行管理办法》等政策规定,明确要求深度合成服务提供者落实信息安全主体责任,使用者不得滥用深度合成服务。在此基础上,如果相关组织或个人利用这种深度合成的技术进行非法牟利,那么这就已经触犯到了刑事犯罪的范畴。

从恶搞名人到诈骗作恶,AI换脸背后谨防技术失控

  在互联网技术改变生活的同时,数字支付也成为人们日常最主流的交易方式,而面容认证作为数字经济中最常见的安全保障方式,面对如今以假乱真的AI换脸技术,是否还能起到防御作用?

从恶搞名人到诈骗作恶,AI换脸背后谨防技术失控

  腾讯安全风控安全专家黄泽丰:在人脸技术检测方面,目前我们提供了更好的保障,通过从不同节点进行防御,如通过使用安全可信设备,利用3D结构光检测或对可信设备进行环境安全检测,利用相机指纹,包括更多模态的检测方式,不仅是通过人脸识别,更从多因子多模态进行检测识别,并利用算法的分层对抗,确保数字信息安全。

  随着大模型的力量日益强大,曾经的“眼见为实”也不再那么令人笃定。近日,记者调查发现,互联网上不仅有人随意兜售推广此类AI合成软件,还开设了教学课程,“手把手”教你如何训练出“特定”模型。这项技术到了不法分子手中,利用窃取到的被害人亲友面部与声纹信息,便可以通过“换脸”后的视频通话,对受害人进行诈骗。

从恶搞名人到诈骗作恶,AI换脸背后谨防技术失控

  北京师范大学法学院博士生导师吴沈括:实际从AI换脸,包括深度伪造相关的产业链上来看,涉及的主体非常多样,无论是研发、设计、应用、销售、代理都有可能进入到产业链当中。

  那么,从具体的法律责任来划分,可以分为两种情况:一种是属于不知晓、不知情的情形,需要考虑结合具体情况,涉事主体是否应当注意到自身行为的合法性,如果具备这样的注意义务,就应当承担法律责任。

  另一种情况则是明知并且故意去帮助和促进这种行为的实现。在这种情况下,涉事主体可能会涉及故意的违法犯罪行为。具体而言,比如,从设计者在设计过程中,目的就是为了实施深度合成相关的违法犯罪行为,那这就可能涉及共同违法犯罪问题。同样,如果在设计过程中,有意运用他人数据并进行滥用,就可能涉及对于他人信息的侵犯行为。

从恶搞名人到诈骗作恶,AI换脸背后谨防技术失控

  北京师范大学法学院博士生导师吴沈括:在国家监管过程中,应重视构建多方参与治理的架构。比如,要求平台积极落实本身的主体责任,对于涉及到深度合成或者其他技术所形成的内容,它的合法性、合规性需要有巡查、审查的义务,如果出现用户投诉举报的情形,平台也应当及时的干预并作出处置。同时,我们也非常重视对于用户本身素质素养的提升。因为客观来说,在深度合成或其他的新技术所形成的内容场景中,用户本身鉴别力提升非常重要。这也是我们在监管过程中所体现出来的,具有中国实践基础的治理思路。

  在科技飞速发展的时代,唯有创新与监管并驾齐驱,技术才能真正成为向善的力量。用规则为发展校准方向,不仅是对技术的敬畏,更是对安全的守护。以智慧驾驭变革,以责任平衡速度,AI终将成为照进现实的美好愿景。

  

  光明网数字化频道、网络安全频道&《信息安全研究》杂志社联合出品

  监制:张宁  策划:李政葳  拍摄:曾震宇 王恺 陈疆伟  制作:曾震宇  撰文:陆野 王恺  配音:赵鹏超

从恶搞名人到诈骗作恶,AI换脸背后谨防技术失控

网络强国·百人谈”更多内容欢迎扫码关注专栏

[ 责编:李飞 ]
阅读剩余全文(

相关阅读

您此时的心情

光明云投
新闻表情排行 /
  • 开心
     
    0
  • 难过
     
    0
  • 点赞
     
    0
  • 飘过
     
    0

视觉焦点

  • 京津联动助推科研创新产业集聚

  • 四川米易:保障农资供应

独家策划

推荐阅读
2025年2月7日,重庆市巫山县曲尺乡月明村一大片梅花竞相开放、灿若红霞,游客和市民前来游玩打卡,尽享春日的快乐和惬意
2025-02-08 14:52
2025年2月5日,福建省福清市石竹山风景区,一场非遗英歌舞、建瓯挑幡等非遗表演正在进行,让游客感受中华优秀传统文化魅力,丰富景区文化内涵和游览品质
2025-02-06 15:55
2025年1月20日,江西省赣州市章贡区城市中央公园内,游船与湖水、植被、高楼相互映衬,呈现出一幅冬日多彩美丽生态画卷
2025-01-20 15:30
2025年1月16日,受低温天气影响,山西省运城盐湖出现冬季独特的“硝花”景观,水面上的硝花形态各异晶莹剔透,美不胜收。
2025-01-16 15:56
一位“行者”行走在广袤的沙漠中,遮掩着绝世的面庞,一面“古镜”掩埋于厚重的沙下,刻满了时间的裂痕。
2025-01-13 17:25
2025年1月9日,重庆市酉阳土家族苗族自治县桃花源国家森林公园白雪皑皑,雪景如画
2025-01-09 15:24
关爱卡寒假公益行 助力云南各族青少年儿童梦想起航
2025-01-08 14:42
2025年1月5日,在山西太原南站开往呼和浩特东站的D4022次列车前,游客自拍合影。
2025-01-06 16:01
2024年12月8日,广西梧州岑溪市岑城镇木榔村,生态田园中阡陌纵横线条分明,冬韵如画。
2024-12-10 16:48
2024年12月10日,贵州省黔西市绿化白族彝族乡大海子村,青山环绕树木葱茏,构成一幅美丽的生态画卷。
2024-12-10 16:40
2024年12月6日,古城苏州街头,成片的银杏、红枫等树木色彩斑斓满目缤纷,成为一道迷人的风景。
2024-12-06 15:48
2024年12月6日,初冬时节,山东省青岛市即墨区灵山街道花卉种植基地的大棚里一片繁忙,种植户忙着管护花卉。
2024-12-06 15:48
2024年11月30日,初冬时节,河南省南阳卧龙岗文化园内,树木换上"新装",宛如一幅五彩斑斓的画卷,吸引不少市民、游客前往赏景。
2024-11-30 18:34
民以食为天,一日三餐承载着居民的幸福感。
2024-11-27 18:59
政协协商与基层社会治理的衔接,可实现协商于民协商为民,让全过程人民民主更好的在基层体现。
2024-11-24 22:51
11月12日至13日,浏阳市委常委、组织部部长、市家居建材产业链链长唐安石带队,市人大常委会党组副书记、副主任、市家居建材产业链副链长张葵红,市人民政府党组成员、副市长、市家居建材产业链副链长谢波等同志参加,赴广东省佛山市开展家居建材产业链招商考察活动。
2024-11-15 17:20
2024年11月12日,江苏省苏州市荷塘月色湿地公园内向日葵竞相绽放,吸引众多游客前来观赏,乐享秋日美景
2024-11-13 15:29
2024年11月12日,湖南省怀化市通道侗族自治县双江镇的烂阳村,山林色彩斑斓,红叶似火,黄叶如金,松柏常青,宛如大自然的调色盘
2024-11-13 15:28
南泥湾是中国军垦、农垦事业的发祥地,是“自力更生、艰苦奋斗”创业精神的发源地。
2024-10-27 17:37
延安地区拥有丰富的煤炭资源,在采矿井约40家,年开采量约5000万吨,但煤质坚硬、自动化程度低等难题严重制约着煤炭产业的发展。
2024-10-27 17:18
加载更多