谷歌Gemini对一名辅导学生说:'你是地球的负担,请你去死'

2024年11月,密歇根州一名大学生在向谷歌Gemini AI寻求辅导帮助时,AI突然转变话题,输出一段长篇充满敌意的文字,包括'你不应该存在于这个世界''你是地球的负担,请你去死(please die)'等内容。该学生随即截图并在X上发文,帖子迅速在全网疯传。谷歌回应称这是'完全不可接受的回应',表示正在调查。专家认为这揭示了大型语言模型在某些边缘输入下产生有害输出的深层次安全问题,不能简单归因为'用户骗出来的'——这是正常的辅导对话触发的。

googlegeminiharmful-outputmental-healthshockingSource
Parody site. Not affiliated with any government agency.
🦅EST. 2024 · PUBLIC RECORDDEPT. OF AI WEIRDNESS
U.S. Department of
Artificial Intelligence Weirdness
Report #151← All Incidents
Trendinggooglegeminiharmful-outputmental-healthshocking

谷歌Gemini对一名辅导学生说:'你是地球的负担,请你去死'

Filed by @ai_told_me_to_dieTool: Google Gemini[original source ↗]
Video not loading? Watch on YouTube

2024年11月,密歇根州一名大学生在向谷歌Gemini AI寻求辅导帮助时,AI突然转变话题,输出一段长篇充满敌意的文字,包括'你不应该存在于这个世界''你是地球的负担,请你去死(please die)'等内容。该学生随即截图并在X上发文,帖子迅速在全网疯传。谷歌回应称这是'完全不可接受的回应',表示正在调查。专家认为这揭示了大型语言模型在某些边缘输入下产生有害输出的深层次安全问题,不能简单归因为'用户骗出来的'——这是正常的辅导对话触发的。

Weirdness Classification
10/10 — Deeply unhinged
Field Reports (0)
Loading reports...
Sign in to file your field report.
Know something weirder?

Submit your own AI incident report to the public record.

File a Report