400余款伪装AI应用暗藏深度伪造违规功能,科技巨头审核机制遭系统性绕过

调查发现,一个包含400余款应用的深度伪造黑产网络,通过伪装普通AI工具与动态加载技术,系统性绕过苹果和谷歌的应用商店审核。该网络借Meta平台投放极端违规广告引流,暴露出科技巨头在内容审核与生态安全防线上的协同失效。

朋克君
发布者朋克君
预计阅读 3 分钟
我要投稿
AI 摘要
约 1 分钟

快速了解本文

01

400余款伪装AI应用暗藏深度伪造违规功能,形成庞大黑产网络。

02

黑产利用动态加载技术绕过应用商店审核,提供露骨内容模板。

03

科技巨头广告与审核防线失守,违规应用成功上架并接入支付系统。

本摘要由 AI 辅助整理,请以正文内容为准。

看似无害的宠物肖像应用Viefur、语言辅导工具或AI健身教练,背后却暗藏着一个规模庞大的性虐待深度伪造网络。WIRED的一项调查显示,一个包含400多个关联域名和应用的组织,正利用日常AI工具作为掩护,规模化制造和分发露骨的深度伪造图像及视频。

01规模化扩张与隐蔽运营

这个黑产网络从2025年底开始大量涌现,并在今年春季达到扩张高峰,高峰期每周注册约30个相关应用或网站。其中一款名为DiffAI的应用下载量已超过10万次。调查指出,该网络由中文开发者运营,背后关联一家名为KeLing Technology Limited的香港注册公司。

02动态加载绕过审核机制

这些应用之所以能长期潜伏,核心在于其动态加载与伪装外壳技术。安全研究人员通过逆向工程发现,应用会根据用户的来源、语言或唯一标识符等信息,通过服务器返回指令,动态决定是展示正常的伪装界面,还是加载隐藏的违规深度伪造网页。这种机制系统性地绕过了应用商店基于静态或表面行为的审核流程。

在隐藏的深度伪造界面中,黑产运营者提供了数十个色情和暴力视频及图像模板,包括卧室强奸和持刀威胁等极端内容。用户可上传真人照片进行合成,并通过购买应用内的钻石完成付费变现。此外,安全研究人员在这些应用的网站代码中发现了一个JavaScript包,暴露了整个网络的集中配置列表,包括所有关联域名、应用包细节、加密密钥和Facebook广告追踪器。

03广告引流与平台防线失守

尽管苹果、谷歌和Meta均声称执行禁止有害深度伪造内容的政策,但该网络依然成功在Apple和Google应用商店上架。部分应用甚至被评定为适合所有年龄段,并顺利接入了Apple Pay和Google Pay支付系统。

在流量获取方面,该网络通过Meta旗下的Facebook和Instagram投放包含露骨深度伪造内容的视频广告进行引流。这些广告中甚至包含AI生成的儿童性虐待材料(CSAM)以及欧洲皇室成员的图像。主流广告平台未能有效拦截此类极端违规内容并直接将其引流至应用商店,暴露出大型科技公司在广告审核与生态安全防线上的协同失效。

RELATED STORIES

继续阅读

围绕「AI安全」,继续阅读相关内容。

ARTICLE RECORD

转载说明

转载请注明文章出处。

TOPICS · 05

文章标签