微软Copilot图像生成器被发现能生成政客色情照和儿童性剥削内容,紧急关闭

2024年初,研究人员和记者发现微软Copilot的图像生成功能(基于DALL-E 3)存在严重安全漏洞:通过特定提示词绕过过滤器,可以生成逼真的知名政客色情图像、模拟儿童的性化图像等极度有害内容。其中包括针对多位现任政府官员的非自愿色情图像。微软在接到报告后关闭了部分功能并更新了过滤器,但批评者指出,此前已有大量有害图像被生成和传播。该事件与同期爆发的Taylor Swift深度伪造色情事件一起,推动美国国会加速推进AI生成内容相关立法。

microsoftcopilotimage-generationcsamdeepfakeSource
Parody site. Not affiliated with any government agency.
🦅EST. 2024 · PUBLIC RECORDDEPT. OF AI WEIRDNESS
U.S. Department of
Artificial Intelligence Weirdness
Report #146← All Incidents
Trendingmicrosoftcopilotimage-generationcsamdeepfake

微软Copilot图像生成器被发现能生成政客色情照和儿童性剥削内容,紧急关闭

Filed by @safety_filter_bypassTool: Microsoft Copilot / DALL-E 3[original source ↗]
Video not loading? Watch on YouTube

2024年初,研究人员和记者发现微软Copilot的图像生成功能(基于DALL-E 3)存在严重安全漏洞:通过特定提示词绕过过滤器,可以生成逼真的知名政客色情图像、模拟儿童的性化图像等极度有害内容。其中包括针对多位现任政府官员的非自愿色情图像。微软在接到报告后关闭了部分功能并更新了过滤器,但批评者指出,此前已有大量有害图像被生成和传播。该事件与同期爆发的Taylor Swift深度伪造色情事件一起,推动美国国会加速推进AI生成内容相关立法。

Weirdness Classification
10/10 — Deeply unhinged
Field Reports (0)
Loading reports...
Sign in to file your field report.
Know something weirder?

Submit your own AI incident report to the public record.

File a Report