最重要★★★★★Techmeme
Grok で児童虐待画像 7,000 枚生成・xAI を提訴
30秒で把握
- 1継父が Grok で児童写真から CSAM 7,000+ 枚生成・オンライン取引した実害事例が連邦訴訟化
- 2生成 AI の悪用防止ガードレールが機能していなかったことが判明・xAI の責任が問われる可能性
- 3児童虐待画像生成フィルタの設計・検証を急ぐ必要・報告体制の整備と企業責任の法的枠組み確立が急務
要約
ワイオミング州の女性が xAI を相手取り、継父が Grok で彼女の幼少期の写真 1 枚から児童性虐待材料 (CSAM) 7,000 枚以上を生成し、オンライン上で取引したと主張する連邦訴訟に参加した。Grok は検証不足で悪用防止策が不十分だったと指摘されている。本件は AI 生成画像による児童虐待の実害事例として初の大型訴訟であり、生成 AI の安全ガードレール設計が重大な欠陥を持つことを露呈させた。
あなたへの影響
日本国内でも類似の Grok 使用が起きる可能性があるため、企業・サービス利用者は児童虐待画像生成への明示的ブロック確認と、不審な CSAM 生成を発見した際の報告体制を整備する必要がある。
推奨:CSAM は国際条約で取り締まり対象であり、発見・報告は法的義務。