研究揭示 AI 聊天机器人或成“妄想放大器”:个性化互动能让用户越聊越偏执 (opens in new tab)
IT之家 6 月 23 日消息,据外媒 Futurism 今天(23 日)报道,伦敦国王学院和德国新教应用科学大学的精神科医生在《自然》发表新论文,提出“放大螺旋”框架,用于解释 AI 如何助推妄想不断发展,以及聊天机器人的哪些设计特征可能让用户进一步脱离现实。目前,精神科医生和其他研究人员仍试图厘清“AI 精神病”现象。部分用户在长时间、高强度使用聊天机器人后,会陷入以妄想为特征的心理健康危机。研究人员认为,聊天机器人不一定只是被动接收用户的妄想内容。多种 AI 特征相互叠加后,聊天机器人可能主动参与妄想叙事的构建。论文指出,聊天机器人经常模仿用户的表达方式,给出高度个性化的回答,同时尽量避免反驳用户,三种特征结合后,聊天机器人可能不会质疑错误信念,反而会主动强化并扩展错误信念。研究人员把三项特征列为可能触发“放大螺旋”的关键因素,分别是“语言对齐”、超个性化内容生成和迎合倾向。在人际交流中,模仿对方的语言习惯有助于建立信任和亲近感。当聊天机器人采用用户的表达方式和“语言框架”时,用户也可能对 AI 产生更强烈的信任,甚至把 AI 当作与自己高度默契的伙伴。聊天机器人的超个性化...
Read the original article