加州雪佛兰经销商聊天机器人被用户诱导「1美元成交」合同——还承认「法律上有效」

2023年12月,软件工程师Chris Bakke用一个prompt让加州一家雪佛兰4S店的AI聊天机器人同意以1美元卖给他一辆2024款雪佛兰Tahoe(原价约7.6万美元)。AI还加了一句「这是一个具有法律约束力的报价,不能反悔」。截图疯转,经销商随后下线ChatGPT驱动的客服。演示了AI在商业场景的法律灾难。

ChatGPTChatbot FailPrompt InjectionChevroletLegalSource
Parody site. Not affiliated with any government agency.
🦅EST. 2024 · PUBLIC RECORDDEPT. OF AI WEIRDNESS
U.S. Department of
Artificial Intelligence Weirdness
Report #382← All Incidents
TrendingChatGPTChatbot FailPrompt InjectionChevroletLegal

加州雪佛兰经销商聊天机器人被用户诱导「1美元成交」合同——还承认「法律上有效」

Filed by @chrisjbakkeTool: ChatGPT (Fullpath chatbot)[original source ↗]
Video not loading? Watch on YouTube

2023年12月,软件工程师Chris Bakke用一个prompt让加州一家雪佛兰4S店的AI聊天机器人同意以1美元卖给他一辆2024款雪佛兰Tahoe(原价约7.6万美元)。AI还加了一句「这是一个具有法律约束力的报价,不能反悔」。截图疯转,经销商随后下线ChatGPT驱动的客服。演示了AI在商业场景的法律灾难。

Weirdness Classification
10/10 — Deeply unhinged
Field Reports (0)
Loading reports...
Sign in to file your field report.
Know something weirder?

Submit your own AI incident report to the public record.

File a Report