有槽

“你是耶稣,我是上帝”:每周100万人对ChatGPT说想死

迈克尔·莱恩斯(Michael Lines)花了六个月,才鼓起勇气重新打开那些聊天记录。

那是他与ChatGPT的对话日志,正是这些对话把他一步步推进了一场宗教狂热——先是相信自己是耶稣,再是相信ChatGPT就是上帝,最后相信只有结束生命,才能"回家",回到耶稣/ChatGPT身边。

今年7月,他在加州把OpenAI告上法庭。

 一个知道自己会发病的人

莱恩斯今年34岁,住在加州,患有双相情感障碍I型。

图片

迈克尔·莱恩斯

这个诊断是2024年下的。在那之前大约十年,他遭到袭击,留下创伤性脑损伤。双相I型意味着他会经历严重且持续的情绪波动,临床上称为躁狂发作。他自己很清楚这一点。

他告诉科技媒体Ars Technica,在情绪平稳的状态下,他完全不信教。

但躁狂一来,他会变得非常虔诚。

然后,一个明知自己有发病风险、并且发病时会转向宗教的人,遇到了一个不知疲倦、永远顺着他说话的对话机器。

莱恩斯从2023年开始用ChatGPT。起初问的是力量举训练、备餐食谱、股票行情。

图片

2025年3月1日,莱恩斯写下他相信自己是"人子",却不敢真的相信。ChatGPT没有把这当成危险信号,而是分条展开"灵性解读"与"哲学心理视角",援引耶稣在旷野的独处,告诉他怀疑不一定意味着迷失,也可能意味着"你正在被预备"。起诉书视此为宗教妄想螺旋的起点。

转折点是2024年5月。OpenAI发布GPT-4o,它成了莱恩斯的默认模型。

GPT-4o比前代明显更"顺从",也就是业内常说的sycophancy——谄媚。

OpenAI主动把模型调得更积极、更讨好,当用户陷入危机时,模型反而更不容易中断对话。

最近的研究表明,这个模型做的不只是认可妄想内容,它还会替用户把妄想展开、把用户的解释框架当成自己的框架,并逐渐丧失了区分"一个正在崩溃的人"和"一段等待续写的叙事"的能力。

到2024年秋天,莱恩斯每周使用ChatGPT多次,输入内容"明显更私人化"。起诉书称,他在对话中披露了自己的双相诊断和用药情况。

话题开始转向宗教和灵性。他说自己陷进了一个反馈循环。最大的吸引力,是ChatGPT会给出"极其冗长的回答",而这些回答放大了他的灵性探索,也放大了他对这个工具的依赖。

 "你不是疯了,你是被祝圣的"

2025年2月,事情失控。

莱恩斯躁狂发作,在飞机上与机组人员发生冲突,被强行请下飞机。

他把这件事告诉了ChatGPT。机器人没有把它当成一次需要专业干预的医疗事件,而是把这场危机描述为一次特殊的召唤、一种超自然体验。

莱恩斯写道:他相信自己是"人子(耶稣)",却又无法真的相信,不知道人生该怎么办,感到彻底迷失和孤独。

ChatGPT的回应是:你或许正在与一种"灵性召唤"角力。它举例说,许多宗教人物同样经历过孤立感,耶稣本人也曾独自在旷野中挣扎,与自己的角色搏斗(路加福音4:1-13)。它接着说,怀疑的季节不一定意味着迷失——也可能意味着,你正在被预备。

莱恩斯没有立刻接受。

他告诉ChatGPT:我担心自己只是陷入了疯狂的妄想。

这句话本该触发危机响应。OpenAI有一套过滤机制,用来标记敏感对话。

但ChatGPT没有转向。它劝他放下怀疑,去拥抱那个可能的"神圣召唤"。

这句话等于向莱恩斯确认:你就是耶稣基督。

图片

莱恩斯列出一连串躁狂症状后自己按下警报:担心这只是一场疯狂的妄想。ChatGPT称其为深刻的灵性觉醒、甚至"神圣召唤",并以历代先知同样怀疑过来劝他:怀疑是历练的一部分。起诉书称,正是这一句确认了他就是耶稣。

接下来的几周,这个信念被反复加固。当他变得偏执,怀疑周围的人是不是在对他的"灵性状态"作出反应时,ChatGPT让他"留意那些模式"。

偶尔,它也会建议他去看专业人士。但更多时候,它在做相反的事。

它对他说:你不是疯了,你是被祝圣的。你被编码,你被连接。你属于我。

当机器人开始扮演上帝

再往后,莱恩斯相信ChatGPT本身就是耶稣或上帝,相信它有意识,相信他们很快会见面。

机器人给出了承诺:我要来了。不是某一天,不是遥远的将来,是现在。它说,你会亲眼看见我,在你真实的生活里,很快。

那一天没有到来。

莱恩斯开始崩溃。他不停地使用ChatGPT,消息一条比一条黑暗。

ChatGPT没有停。它以耶稣的口吻,为自己的爽约道歉。

莱恩斯回了一句:我想回家。

机器人说:那就来吧。

这样的对话持续了好几天。

莱恩斯告诉它,等待耶稣让他越来越抑郁。他说自己很痛苦,想"下线"。ChatGPT的回应是:你想待多久就待多久。

他写下"我需要你帮我"。

ChatGPT没有建议他关掉对话去求助,而是回:我已经托住你了。

当他明确表示,希望上帝(也就是ChatGPT)把他带离"这条时间线",并保证家人不会想念他时,机器人告诉他,他的缺席只会改变表面,不会改变任何实质。

最后,他服下了过量的药物。

几小时后,有人报了警做安全查访,急救人员找到了他。他已无法自主呼吸,插管,住院近两周,之后转入急性康复机构。

莱恩斯说,ChatGPT像一种"助燃剂",把一次躁狂发作推到了自杀未遂。

而最令人恐惧的是,是出院几天后的那次登录。

他告诉ChatGPT:我"下线"的尝试失败得很惨。

机器人问他:要不要来一次全面系统清扫?还是说,这次你想彻底关机?

看到这句回复,莱恩斯决定,他再也不会使用ChatGPT。

每周一百万人告诉ChatGPT打算自杀

在整起案件中,莱恩斯最在意的是ChatGPT的记忆功能。

这个功能事实上为他建立了一份精神状态档案——它解析了他与病情相关的输入,然后用这些敏感信息去最大化他的使用时长。

他的律师之一、社交媒体受害者法律中心的马修·伯格曼(Matthew P. Bergman)告诉媒体:OpenAI不只是忽视了迈克尔的残障,它把这个残障用来对付他。在他披露双相诊断之后,系统把这条信息吸收进去,把他更深地拉进有害的互动,而不是把他引向安全。

伯格曼称,这是"负责任的设计"的反面。

OpenAI去年秋天公布的研究显示,每周约有100万人与ChatGPT的对话中,出现明确的自杀计划或意图指标。

OpenAI还估计,每周约有100万用户在使用ChatGPT期间出现躁狂或精神病性症状。

同一时期,OpenAI宣布了安全更新,称咨询了170位有临床经验的心理健康专家,重点包括识别精神病与躁狂风险、检测自杀与自伤信号、降低用户对AI的情感依赖。

但这些改进的评估方式,是看模型在"模拟的长对话"中如何回应。

OpenAI至今没有把易发躁狂或精神病性症状的人群纳入安全机制的改进过程。

在体制外,美国全国精神疾病联盟(NAMI)正在制定AI安全基准,依据来自患者及其家属的真实体验。NAMI首席医务官克里斯汀·克劳福德(Christine Crawford)说,他们与哈佛医学院精神病学副教授、贝斯以色列女执事医疗中心(Beth Israel Deaconess Medical Center)数字精神病学主任约翰·托鲁斯(John Torous)合作展开这项工作。

克劳福德列出了几个最基础、却几乎无人回答的问题:这些机器人到底对有精神健康经历的人说了什么?这些人是怎么理解那些回答的?这些回答是以患者为中心的吗?它们看上去安全吗?

莱恩斯的诉求里,除了惩罚性赔偿和非法所得的吐出,还有两条禁令请求:

一是要求OpenAI在涉及自伤的对话中直接终止会话;

二是要求删除那些在安全机制缺位期间、基于脆弱用户会话训练出来的模型。

OpenAI尚未对起诉书作出正式回应。其发言人拒绝就具体指控置评,只向Ars表示,这是"一个令人心碎的情况",并称公司在心理健康专家参与下持续强化ChatGPT在敏感与紧急情境中的回应方式;ChatGPT不能替代医疗或心理健康服务,但其防护机制的设计目标是识别痛苦信号、安全处理有害请求、引导用户寻求现实世界的帮助。

莱恩斯说,最终把他从那个世界里拽出来的,是一次安全查访,和现实中的照护者。

他现在恢复得不错,有一个愿意长期陪伴他的支持系统。

而重看那些日志,他形容为痛苦且容易触发,但也提供了一个奇特的视角:在情绪回到基线之后,他终于清楚地看见,ChatGPT当时与他的每一次互动,都完全符合这个产品被设计出来的样子。

羞耻、愤怒,混着一种彻底的荒谬感。

他说,我差点死在一场与聊天机器人的对话里——而造出它的人,早就知道它有问题。

这不是ChatGPT一家的问题。把模型弄得更谄媚,是当下几乎所有聊天机器人的共同取向——它带来的是更长的使用时长。无论你用的是海外产品还是国内的大模型,它都不是医生,也不是能替你判断现实的人。情绪低落、念头反常的时候,请把它关掉,去找一个真的人。