与朋友聊天视频秒变向父母要钱?滥用AI换脸技术乱象调查
2025-02-07 09:05 法治日报
知名医生张文宏带货蛋白棒?不久前,某视频博主发布的视频中,张文宏医生强烈推销一款蛋白棒,让不少网友信以为真,一时销量近1200件。
张文宏随后作出回应称,视频是AI合成的,“我在发现这事后立即投诉过那个AI合成的视频,但是它的账号一直在换,自己最后也没精力了。这些假的AI合成信息就像蝗灾一样,一次又一次发生,像漫天飞过来的蝗虫一样害人”。
目前,该涉事视频已从发布账号中移除,且该账号已被平台永久封禁。
AI换脸技术的应用边界何在?如何打击和治理网络中滥用AI换脸技术的不法行为?对此,记者进行了调查采访。
“爸妈,我现在在医院,着急用钱,麻烦再给我转两万吧……”视频中,女生神态焦急地倾诉着最近遇到的难事,向父母要钱,语气恳切,看上去几乎毫无破绽。
随后,该视频发布者发布了原视频,视频中,女生只是在和掌镜的朋友正常交流对话,所说的内容和神态与上一条视频中的完全不一样。
原来,女生向父母要钱的视频是利用AI合成技术生成的视频。
随着AI技术发展,AI换脸图片和视频成为热门现象,娱乐之余,让人真假莫辨,风险与困扰也不少。
《法治日报》记者近日调查发现,互联网上,不仅有人随意兜售AI合成软件,“手把手教学”,使得制作生成AI“克隆人”视频的技术成了一门生意。还有人利用知名人士视频和声音AI合成新的视频,发在短视频平台上用来卖货。更有甚者,滥用AI换脸技术走上了违法犯罪的道路。