“AI换脸”软件公开网售,几百至上千元不等!法律边界在哪?

新闻

作者：央视新闻

点蓝色字关注“央视新闻”

近日，因“AI换脸”导致的诈骗案件引发关注。伴随着AI大模型的发展，“换脸技术”的应用范围越来越广，技术的突破还使得换脸后的人物表情、动作细节更为逼真，一旦被不法分子利用，可能带来严重危害。
总台记者经调查发现，网上“AI换脸”软件的获取非常容易。利用此类软件的法律边界在哪里？如何做好事前监管？01
网上出现“AI换脸”付费软件
套餐价格从499元至2888元不等
在网上，演示换脸软件使用方法及效果的教程比比皆是，其中不少“AI换脸”软件需要高价付费使用。

记者根据搜索结果联系到一名开发者，他向记者提供一段使用其软件实现换脸的示范视频——双视窗页面左侧是换脸之前的原始视频，右侧则是换脸之后的视频，肉眼来看，换脸之后的“数字人”口型、表情、微小的动作几乎毫无破绽。



△卖家展示的素人换脸效果（S为原视频，D为更换之后）

在其销售的网站上，该软件开发者还展示了如何将两位知名女星的眼睛和嘴巴“拼接”到一起，生成全新“数字人”的视频。



△卖家展示的局部五官更换
这一付费软件提供从初级（LV1）到超级（LV4）再到全套（LV5）的不同版本。以初级套餐来说，499元提供软件界面、视频指导、换脸模型等，如果花2888元，则可得到全套（LV5）等级的视频换脸模型。


△网络上提供多种不同等级的换脸软件产品‍02‍‍‍‍‍‍‍“想换什么脸都可以”AI大模型可集成多种功能打造“数字人”
记者发现，该网站底部没有任何文字显示其已经过备案。卖家也十分谨慎，全程仅用文字交流。他表示，与初级（LV1）至超级（LV4）套餐相比，全套（LV5）版本迭代更多，能力更强，也可以理解为换脸效果更为逼真，同时，不仅可以实现视频换脸，还支持直播换脸。记者进一步询问能否根据自己的需求换脸时，软件开发者表示：“想换什么样的脸拿素材训练就可以。”


△软件开发者与记者的聊天截图一位从事AI开发的技术人员表示，这意味着可能会有更多难以控制的风险。“集成文生图、文生文，文生音频、文生视频、换脸，这样的功能结合起来，就可以打造出一个完全崭新的‘数字人’或者叫‘AI人’，监管成本和难度高了好几个数量级。”


△卖家展示的用户反馈
03专家：有效的标识监管体系
能提前厘清“AI换脸”带来的模糊边界‍

北京嘉维律师事务所律师、IT法律专家赵占领表示，从事后打击的角度讲，刑法中有关于诈骗罪的规定；民法典明确，公民享有肖像权、姓名权、名誉权等相应的民事权利。也就是说，如发生使用他人肖像进行诈骗的相关案例，不法分子能够在事后被法律约束与制裁。但在人工智能技术飞速发展的当下，还应探讨如何能够做到有效的事前防范。

例如，在《互联网信息服务深度合成管理规定》中要求，深度合成服务可能导致公众混淆或者误认的，深度合成服务提供者应当在生成或者编辑的信息内容的合理位置、区域进行显著标识。

《生成式人工智能服务管理办法（征求意见稿）》要求，利用生成式人工智能产品向公众提供服务前，应当按照有关规定向国家网信部门申报安全评估；要尊重他人合法利益；产品提供者应当对生成式人工智能产品的预训练数据、优化训练数据来源的合法性负责等。



△图源：视觉中国

浙江大学国际联合商学院数字经济与金融创新研究中心联席主任盘和林认为，从目前来说，如果能够有效落实标识的要求，形成有效的监管体系，可以在很大程度上提前厘清“AI换脸”所带来的模糊边界。

盘和林：当前“AI换脸”的标识监管体系还没有形成，要针对不标注的内容，通过技术的手段来辨别，并且对不标注的个人或者是单位组织要有具体的处罚措施、标准以及制度。

北京嘉维律师事务所律师、IT法律专家赵占领认为，从长远来看，监管与处罚措施还需要随着技术发展不断“迭代”，才能形成立体有效的治理方案。
▌本文来源：央视新闻微信公众号（ID：cctvnewscenter）综合中央广电总台中国之声

更多新闻

“AI换脸”诈骗防不胜防？要用“法”打败“魔法”！
这位爆火的歌手，侵权了吗？

---

制片人/王兴栋  主编/杜显翰
总台记者/周益帆

编辑/刘波 王迪  校对/高少卓

©央视新闻 持续关注！↓↓↓