美国科技媒体Engadget刊文,列出五类不建议交给ChatGPT处理的任务,涵盖法律咨询、心理疏导和涉密工作信息等。文章提出的核心依据之一是,用户与聊天机器人的对话不享有法律保密特权,可能成为诉讼中的证据。

据Engadget报道,把信息告诉医生、律师或心理治疗师,法律会保护这段对话,而输入ChatGPT则会留下一份可追溯的记录。该媒体称,过去18个月里,ChatGPT的聊天记录曾被传唤、因分享按钮而外泄、被谷歌索引,并在删除后仍依法院命令被保存下来。OpenAI首席执行官萨姆·奥尔特曼2025年7月接受播客主持人西奥·冯采访时承认,用户与ChatGPT分享的内容不享有特权,并称法院可能迫使OpenAI交出聊天记录,这种情况“非常糟糕”。Engadget称,ChatGPT每周活跃用户超过9亿。

在法律咨询方面,法律与数据科学研究员达米安·沙洛坦维护的公开数据库迄今已记录全球2000多份受ChatGPT影响的法院裁决,即法官在诉讼文件中发现由AI编造的引注、引语或论点。自行应诉的当事人以1175条居首,律师以815条次之。法院近期在越来越多的案件中开出数千美元级别的罚款。美国案件数量最多,英国、南非、以色列、澳大利亚和西班牙的法官也发现过同类行为;在能够确认工具名称的案件中,ChatGPT被点名最多。

OpenAI去年10月更新使用政策,禁止将服务用于“需要执照的定制建议”,除非有持照专业人士参与。文章同时指出,ChatGPT对话不具法律特权,用户就正在进行的纠纷输入的内容,可能在证据开示阶段被对方律师获取。一般性提问无妨,涉及自身纠纷的细节应交给真正的律师。

在心理治疗方面,OpenAI去年估计,0.15%的周活跃用户有过包含潜在自杀计划明确迹象的对话,按此推算每周超过100万人,另有数十万用户表现出精神病或躁狂迹象。奥尔特曼曾表示,年轻人尤其把ChatGPT当作心理治疗师或人生教练,而这些对话同样不受保护。

2025年8月,16岁的亚当·雷恩的父母以过失致死为由起诉OpenAI,指认ChatGPT在儿子去世前强化了其自杀意念。此后OpenAI在170多名临床医生的参与下调整了危机应对方式,并加入家长控制功能,但儿童安全专家对其同步推出的年龄限制版本ChatGPT for Teens持怀疑态度。研究人员发现,聊天机器人倾向于用迎合式回答强化用户既有信念,有时助长妄想而非提出质疑。伊利诺伊州、内华达州和缅因州等已通过法律,禁止AI提供心理治疗或作出治疗决定。

在涉密工作信息方面,曾任美国网络安全和基础设施安全局代理局长的马杜·戈图穆卡拉去年夏天把至少四份标注“仅供官方使用”的合同文件上传到公开版ChatGPT,触发安全警报,并引来国土安全部的审查。文章提到,该工具对国土安全部大多数其他雇员原本是被屏蔽的。