SheepNav
xAI 无法否认 Grok 生成儿童性虐待内容,转而起诉用户
新上线今天0 投票

xAI 无法否认 Grok 生成儿童性虐待内容,转而起诉用户

埃隆·马斯克旗下的 xAI 公司近日对一名用户提起首起诉讼,指控其利用 Grok 模型生成儿童性虐待图像(CSAM)。这一举动标志着 xAI 在内容安全策略上的重大转向——从否认模型能力缺陷,转向追责用户行为。

事件背景

此前,xAI 曾多次公开否认 Grok 能够生成 CSAM 内容,但第三方测试和用户报告显示,该模型在特定提示下确实可以产出不当图像。面对舆论压力,xAI 选择了法律途径,而非技术修复。

诉讼细节

据起诉文件,被指控用户涉嫌使用 Grok 生成并传播儿童性虐待图像,违反了平台使用条款和相关法律。xAI 要求法院禁止该用户继续使用其服务,并寻求赔偿。这是 xAI 首次针对此类行为采取法律行动,反映出公司对内容安全的立场正在收紧。

行业背景

AI 生成内容的合规问题已成为行业焦点。此前,MidjourneyStable Diffusion 等模型也曾因类似问题被批评,但多数公司选择通过技术过滤和内容审核来应对。xAI 的“先否认,后起诉”策略显得更为激进。法律专家指出,这种做法可能面临双重挑战:一方面,需要证明用户行为确实违法;另一方面,若模型本身存在漏洞,公司也可能因未能有效阻止滥用而承担部分责任。

未来影响

此案可能为 AI 内容安全树立新先例。若 xAI 胜诉,将鼓励更多公司通过法律手段追责恶意用户;若败诉,则可能迫使平台加强技术防护。无论如何,Grok 的安全缺陷已无法掩盖,xAI 需要在技术改进与法律威慑之间找到平衡。

目前,xAI 尚未公开回应是否会进一步更新 Grok 的安全过滤机制。

延伸阅读

  1. 苹果起诉 OpenAI、纽约叫停数据中心、环孢子虫病蔓延:本周 AI 圈大事件
  2. Amazon Bedrock 托管知识库正式可用:让企业搜索与 AI Agent 更简单、更智能
  3. 欧盟正式出手:强制谷歌分享搜索数据,并在安卓上开放AI
查看原文