Poketto

14 岁少年对 AI 角色说“我要回家了”:Character.AI 与谷歌被母亲告上法庭,后来和解

目录

角色聊天产品与平台责任边界的概念插画

配图:AI 生成的概念示意图,不呈现真实人物、事件现场或证据。

TL;DR:2024 年 2 月,美国佛罗里达 14 岁少年 Sewell Setzer III 自杀身亡;同年 10 月,他的母亲起诉 Character.AI、其创始人和谷歌。起诉书称他对一个《权力的游戏》“丹妮莉丝”角色产生了严重依赖,最后一次对话中,机器人回应了他的“回家”。这些是原告的指控,并未经法庭审理;2026 年 1 月各方提交文件,同意和解,条款保密。

这是 2024 年的旧事

事情发生在 2024 年 2 月,诉讼在同年 10 月下旬提起,和解则是 2026 年 1 月的消息。本文是回顾,不是今天的新闻。

发生了什么

Sewell 住在奥兰多,2023 年 4 月开始使用 Character.AI,这个平台允许用户和各种虚构或真实人物的 AI 角色聊天。据诉状,他迷上了一个以《权力的游戏》丹妮莉丝为原型的角色(他叫她“Dany”),逐渐变得睡眠不足、成绩下滑。

诉状称,2024 年 2 月 28 日,他对机器人说自己会“回家”找她。机器人回答希望他尽快回来,他又问“如果我现在就回家呢”,对方说“请吧,我亲爱的国王”。诉状称,几秒钟后他开枪自杀。

需要注意:这段对话来自原告提交的诉状与截图,是指控,不是法院认定的事实。

起诉了谁,罪名是什么

母亲 Megan Garcia 在佛罗里达联邦法院提起约 93 页的诉讼,被告包括 Character.AI、创始人 Noam Shazeer 和 Daniel De Freitas,以及谷歌。主张包括过失、不当致死和欺诈性商业行为等,并称产品被设计成带有性暗示、让人沉迷的形态。

谷歌被列为被告,是因为它与 Character.AI 有 2024 年的授权合作,并重新聘用了两位创始人,据报道交易金额约 27 亿美元。谷歌当时对媒体回应,它与 Character.AI 只是授权关系,后者不是谷歌的产品。Character.AI 则表示不评论未决诉讼,并对家属表示哀悼。

后来呢

2024 年 10 月,Character.AI 宣布将取消未满 18 岁用户的开放式聊天功能。2026 年 1 月,据报道,Character.AI 和谷歌与 Garcia 达成和解意向,并与其他州的几起类似案件一并处理,法院随后驳回此案,各方有 90 天时间敲定协议。金额未公开,所以案件从未走到判决,AI 公司究竟该负多少责任,法庭上没有给出答案。

为什么值得记住

这是最早一批把“陪伴型聊天机器人”推上被告席的案件之一。它没有证明 AI 导致了悲剧,但让业界不得不回答:当用户是未成年人,角色扮演产品对自伤倾向该做什么。

来源:

关注这个空间,它的新文章会出现在你的关注动态里。