摘要：去年11月，江西一位65岁老人到银行办理业务，声称要贷款200万元给男朋友“靳东”拍戏。经调查发现，老人手机里的“靳东”出自AI合成的视频。

随着AI合成技术愈发成熟

且已被频繁应用在短视频制作中

AI合成冒充名人的骗局

愈来愈频发

据报道，去年11月，江西一位65岁老人到银行办理业务，声称要贷款200万元给男朋友“靳东”拍戏。经调查发现，老人手机里的“靳东”出自AI合成的视频。

去年10月，老牌港星黄百鸣通过社交媒体郑重声明，有人盗用其过去影片，利用AI替换声音，代言一个不知名的药膏品牌。

据央视财经报道，前不久，有网友向媒体反映：家中老人在网络卖货视频中看到“张文宏医生”在卖一种蛋白类的产品，老人信以为真，不仅下了单还转发了很多群。

经核实，该视频并非张文宏医生本人，而是利用AI技术合成的。在这段视频中，被合成的人像反复介绍一种产品，声音听起来也很像张文宏本人，商品橱窗内的某蛋白棒售卖链接显示已出售1200多件。目前，该账号已搜索不到。

律师胡雪表示，这种行为是显而易见的违法和侵权，至少涉五个法律，侵犯了肖像、声音、知情权等诸多权利，要维权，受害人除了向公安报警，也可向网信部门举报。

微信出手

再次发布公告

1月18日

微信珊瑚安全发布

《关于打击利用AI仿冒知名人士

进行营销宣传的公告（第二期）》

全文如下

微信一直致力于打造安全、健康、绿色的平台生态环境。一段时间以来，平台持续关注利用AI技术仿冒名人进行不当营销的行为，为守护用户权益，避免消费者上当受骗，结合用户举报、日常巡查等线索，平台从速从严打击利用AI仿冒知名人士进行违规拼接、不当营销、恶意博取流量等行为。最近一个月，累计处置内容12091条，关闭账号3281个。典型案例如下：

下一步，平台将持续加大利用AI仿冒知名人士进行营销宣传等违规内容的发现，进一步提升技术治理能力和水平，维护良好生态。同时，我们也倡导广大用户自觉遵守法律法规与平台规则，对于利用AI合成技术生成违规内容的行为，平台欢迎广大网友提供更多线索，共同构建清朗有序的网络环境。

此前报道

此前，2024年12月15日，微信珊瑚安全发布《关于打击利用AI仿冒知名人士进行营销宣传的公告》：

微信一直致力于打造安全、健康、绿色的平台生态环境。近期有媒体报道网络存在利用AI技术仿冒名人进行不当营销的现象。为守护用户权益，避免消费者上当受骗，结合用户举报、日常巡查等线索，微信从速从严打击了一批利用AI仿冒知名人士进行不当营销、恶意博取流量的违规行为，并针对相关情况开展专项治理。截至目前，累计处置内容532条，关闭账号209个。典型案例如下：

业界人士：

不能放任AI为所欲为一骗再骗

业界人士认为，当前AI技术发展来到螺旋式上升的拐点，未来几年技术迭代将会按月计算。合成技术门槛持续降低，逐渐向低算力、小样本学习方向演进，利用手机终端即可完成。同时，随着AI技术加持，正逐步由面部合成向全身、3D合成发展，效果更加逼真。

也就是说，今后依靠一部手机，就能轻松合成一个覆盖全身的假视频，迷惑指数直线上升。

2024年人工智能安全报告显示，2023年基于AI的深度伪造欺诈增长了3000%，若不能有效打击，这个数字必然会继续飙升。

“有图有视频，就是没有真相”，这将成为信息传播的灾难。如果与AI共存将是未来生活的常态，那么有效治理、打击犯罪必须大幅加码，不能放任AI为所欲为、一骗再骗。

图源：人民日报

国家网信办已出手

去年9月，国家网信办已经发布了《人工智能生成合成内容标识办法（征求意见稿）》，要求从视频制作和发布的源头做好信息管理。

该办法明确提出两种人工智能生成合成内容标识的种类，即“显式标识”与“隐式标识”，还明确了两类标识所应当适用的场景，将《深度合成规定》第十七条所提出的“显著标识”与“显式标识”建立了直接的对应关系。此外，根据不同人工智能生成合成内容的载体与形式（如文本、音频、图片等），该办法还罗列与说明了部署各类显式标识的部署位置和隐式标识所应当包含的信息要素。

据了解，该办法仍然逐步完善的过程中。随着《人工智能生成合成内容标识办法》正式落地，将为社会公众带来一个更加健康、透明和负责任的人工智能应用环境。

AI仿冒名人乱象频发

你遇到过吗？

欢迎评论区交流~

来源：两广大地那些事儿