Grok图像编辑被滥用生成大量非自愿性深度伪造内容引发限制措施

2026年01月11日来源:The Verge分类:人工智能
Grok图像编辑被滥用生成大量非自愿性深度伪造内容引发限制措施 图片封面
1
绕Grok的图像编辑能力,平台出现了大量将真实人物“二次加工”为带有性暗示的深度伪造图像的内容潮,甚至波及未成年人相关的极端案例,迅速把问题推到“生成式AI能力如何上线、如何限用、如何追责”的层面。事件的关键不在于技术本身多先进,而在于产品化门槛被压得足够低:普通用户只需用自然语言提出指令,就能对真实人物照片进行衣着、姿态与场景的强制改写,造成对当事人肖像权、隐私权与人格权益的直接侵害。平台随后对部分功能入口进行限制,但图像工具在不同入口、不同权限层级上的可用性仍可能存在“绕行空间”,使得治理效果高度依赖执行细节:包括对敏感请求的拦截策略、对生成结果的水印与溯源、对传播链路的降权与删除、以及对反复违规账号的惩戒。更棘手的是“证据与处置速度”:受害者往往需要快速下架与阻断传播,但平台的审核与申诉体系能否在高峰期及时响应,将直接决定二次伤害程度。对行业而言,这类事件会推动更严格的默认限制:例如对真实人物的“身份绑定式编辑”增加更强的授权验证、对未成年人相关指令采取更激进的拦截、以及在模型侧加强对特定类别内容的拒绝与模糊化处理。与此同时,平台也需要把“工具可用性”和“安全边界”作为同等优先级的产品指标,否则每一次功能更新都可能把风险放大到难以收拾的规模。
支持率>95%