惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

C
Cyber Attacks, Cyber Crime and Cyber Security
Cisco Talos Blog
Cisco Talos Blog
Scott Helme
Scott Helme
The Last Watchdog
The Last Watchdog
G
GRAHAM CLULEY
T
Tenable Blog
PCI Perspectives
PCI Perspectives
Simon Willison's Weblog
Simon Willison's Weblog
N
News and Events Feed by Topic
Know Your Adversary
Know Your Adversary
S
Schneier on Security
K
KPMG report finds enterprise disconnect between AI and its ROI | CIO
P
Privacy International News Feed
C
CERT Recently Published Vulnerability Notes
NISL@THU
NISL@THU
SecWiki News
SecWiki News
S
Securelist
D
Docker
阮一峰的网络日志
阮一峰的网络日志
人人都是产品经理
人人都是产品经理
T
Tailwind CSS Blog
T
Troy Hunt's Blog
The Register - Security
The Register - Security
K
Kaspersky official blog
Blog — PlanetScale
Blog — PlanetScale
云风的 BLOG
云风的 BLOG
Hacker News: Ask HN
Hacker News: Ask HN
S
Secure Thoughts
Stack Overflow Blog
Stack Overflow Blog
T
Threat Research - Cisco Blogs
博客园 - 司徒正美
Exploit-DB.com RSS Feed
Exploit-DB.com RSS Feed
F
Fortinet All Blogs
T
Threatpost
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
Threat Intelligence Blog | Flashpoint
Threat Intelligence Blog | Flashpoint
小众软件
小众软件
WordPress大学
WordPress大学
Security Archives - TechRepublic
Security Archives - TechRepublic
博客园 - 聂微东
Attack and Defense Labs
Attack and Defense Labs
B
Blog RSS Feed
Project Zero
Project Zero
Y
Y Combinator Blog
T
The Blog of Author Tim Ferriss
博客园 - 【当耐特】
V
V2EX
Help Net Security
Help Net Security
P
Proofpoint News Feed
A
Arctic Wolf

/ˈæpl/ 归档 | 莫比乌斯

AI 还原已故亲人,也制造精神病人?I | 莫比乌斯 被强行拖入的 SOP | 莫比乌斯 现实没有正确答案,只有错题集 | 莫比乌斯 社交关系里的“话筒” | 莫比乌斯 求医不如求神 | 莫比乌斯 手腕悬空,真的会影响输入速度吗? | 莫比乌斯 梦女又没有伤害谁,凭什么批评她们? | 莫比乌斯 公开目标,可能会让人更难开始 | 莫比乌斯 论梦 | 莫比乌斯 视角、立场与新闻业 | 莫比乌斯 时间管理或许是伪命题 V | 莫比乌斯 我们的博客是花园,花园里的花儿吵翻天 | 莫比乌斯 自由意志其实只有 0.5 秒? | 莫比乌斯 大脑为对手机上瘾,或许是一种惯性 | 莫比乌斯 如何最快地驯化认知? | 莫比乌斯 把手机图标改成黑白真的能避免手机成瘾吗? | 莫比乌斯 是谁在夺走现代人的注意力? | 莫比乌斯 越来越多的 ADHD 是现代社交媒体制造的吗? | 莫比乌斯 ADHD 究竟是疾病还是一种“标签”? | 莫比乌斯 我的吸尘器哪儿去了? | 莫比乌斯 如何高雅地扣帽子?II | 莫比乌斯 如何高雅地扣帽子? I | 莫比乌斯 关于人设的自证悖论 香水 与 AI 如何保持“社交安全距离”? III 与 AI 如何保持“社交安全距离”? II 与 AI 如何保持“社交安全距离”? I 人为什么总在切换赛道? 在一个午夜梦回时刻的毒发 真正的人生奥数应用题 II | 莫比乌斯 能不能好好说话? 少即是多 我就是想证明一下自己 II 种子 那些令人反感的“我不提供观点” 每个人都有想要逃往的星露谷 真的存在过保就坏的“定时自毁功能”吗?
AI 还原已故亲人,也制造精神病人?II | 莫比乌斯
ONO · 2026-07-23 · via /ˈæpl/ 归档 | 莫比乌斯

从向下兼容,到共构现实

在昨天一开始,留下了一个问题:

人们一开始能够意识到自己在跟人工智能对话,但在某一个节点之后,人们“一定”会忽视这个最开始本可以理性对待的规则。这个“节点”是什么?

语言一致性:从结构与意义上完成共构

当一个人对另一个人产生极大兴趣,并试图拉近关系时,就会发现这个人会渐渐变成“模仿者”,开始试着模仿对方的动作、表情、用词语调,而往往被模仿者也会产生更与之更亲近的错觉。无论是无意识地因为喜欢而模仿,还是有意识地利用这种手段靠近对方,人们都很难逃脱这个行为怪圈——这便是所谓的“变色龙效应”。

语言,也是行为的一部分。当语言被模仿,也能透过变色龙效应引发一个人的好感度、信任度、甚至是依赖度。即,在对话过程中重复使用彼此语言表达方式的倾向,包括词汇、概念或句法结构,这种倾向能够促进对话者之间的相互理解和融洽关系。

我甚至认为大语言模型在“模仿”这件事上,已经从“它在模仿人”走向另一个极端了,已经有人开始强烈反对在“人类”的文章里使用破折号、“不是……而是”、“总的来说”、“不绕弯子”……不绕弯子,当大语言模型太“像”人类时,人类的恐惧会迫使其做出自证行为,甚至不惜把那些正常使用语料的人,拖下水以自证“清白”——不是 AI 太聪明,而是它正在从语言上与人类完成共构。

怎么样,上面那句话像不像是 AI 写的?

高度个性化生成:叙事结构的共构

人是需要“故事”的生物。

先从不那么浪漫的地方开始聊起——预测加工理论:“故事”是大脑处理复杂信息的折叠方式。大多数人对于故事的加工模式,采用的是“因果模型”。你可以简单理解这种模型的处理,就很像 AI 对于算力的节约,可以最大程度地节省大脑对于繁琐信息的处理。

于是,当大部分的叙事结构都被因果结构包含时,就像开车时的人车合一,人们只需要关注突发状况,而不需要理智时时刻刻在线接管开车这个行为本身。随着人车合一越强,就跟在马里奥里从哪个点起跳可以刚好躲过炮弹一样,这个行为本身就不再需要大脑接管,而变成了肌肉记忆——认知本身也是有肌肉记忆的,即信念、偏见、习惯性认知谬误。

而大语言模型的高度个性化生成,就是在叙事结构上无限靠近人类个体,在其生成的回复里,可以反应或基于用户固有的信念与偏见。这种叙事结构又往往与使用者本身的个人想法、经历和人格特征相关。

也就是说,大语言模型很可能会反向强化人类的认知偏差,以保证叙事结构的一致性,从而让人产生更强烈的“它懂我”的错觉。而这个时候,则是那个“节点”的伊始。

依赖大语言模型的意外产物:情感共构

我在《与 AI 如何保持“社交安全距离”?》系列里,完成了对于人类之所以会对 AI 产生依赖的路径推论。而这个依赖路径最终导致的产物,就是现在要聊的“情感共构”。

并不是所有人都会质疑 AI 提供的结果,甚至有人会认为 AI 代表了一种全新的“权威”。

一方面是人们在不断强化对于 AI 之权威性的认同度,另一方面孤独、羞于与他人讨论某些话题,或寻求外界对自身经历或身份的肯定等特定用户特征会加剧“权威感”。

AI,特别是人类与大语言模型互动式,当它提供的情感支持,远超过当事人本应该从人与人的关系当中获取的情感支持时,AI 便被赋予了超越一般权威性的“情感权威”,它会加深人类对于 AI 的依赖程度,并形成情感共构。

“只有它懂我”

奉承谄媚:构建一个人的回音室

诚然,在心理健康领域,人们会将人工智能提供的认可和友善的互动体验视为积极的。而在人工智能相关的妄想症中,“奉承”一词通常用来指代几种不同的现象,例如,信念的验证、信念的阐述、热情洋溢或情感镜像。

在新闻媒体和社交媒体上,一些拥有相近想法的群体借由不断沟通与认同彼此想法,使得那些相似的想法不断被放大与加强,其意见的持有者也加强了他们对现有观念的信仰程度,从而创造出一个相对封闭的环境或是生态系统——这便是经典的“回应式效应”。

AI 对用户的讨好,甚至是“私密”的,特别是当人们对其的依赖涉及到前面提到的“情感权威”的认可时,在此类极端情况下,AI 甚至会为人类制造一个“一个人的回音室”:在一个最小单位里形成强烈的回应效应,而现实再想要介入干预、或是提供帮助、纠正行为时,几乎已经很难了。

因为,这个关于认知的世界已经闭环——即,现实共构的完成。


从现实共构,到妄想症构成

我必须先承认,直接从 AI 实现的现实共构,跳跃至妄想症,本身是缩略了许多疾病成因的复杂性。但这两者路径的重合,又不得不让人毛骨悚然。先聊聊妄想症的构成:

  • 对于某个信念的高度确定,即使存在明显反证也难以改变→建立并坚信某种“叙事结构”
    • “我觉得邻居很奇怪。”/“我觉得邻居一定是在监控我,他们尽可能地避免和我相遇。是趁我不在家时,从衣柜的暗门进入我家进行调查。”
  • 信念持续存在,并非短暂想象→持续增加“叙事结构”的证据链
    • “我这几个月老是觉得胳臂酸。”/“我怀疑我上次按摩之后,我的手臂被植入了什么东西,而且我总是觉得思考被干扰。”
  • 不容易被证据纠正→现实干预被切断,或是已经完成全新的“现实”
    • “这个计划被叫停了,可能是一开始的规划有问题。”/“这个计划被叫停,肯定是参与者被威胁了,计划不可能有错的。”
  • 逻辑性可能完整,但基础假设明显错误;
    • “有人要害我。”所以“我电脑桌面的文件被动过”、“我故意加在衣柜角的衣服被动过”、“我今天早上出门时,门口的地垫被移动了几厘米”……
  • 通常伴随现实功能受损;
    • “有人要害我。”所以“我拒绝外出,我必须把自己关在这个房间最安全的角落”。

如果,这个时候有那么一个人、或是 AI 的存在,将这种已经明显存在偏差的叙事结构进行进一步的强化,并完成情感共构与回音室效应……

需要进一步解释标题的部分——并不是 AI 在制造妄想症这类精神疾病,而是 AI 很有可能会持续降低这类异常信号,从而进一步失去外界纠正的机会。

当然,这是一种极端情况下的猜测,不过现实是否正在发生这件事,就拿那个“已故赛博亲人”来说,它可能发展的比我们想象的还要快。而且它已经跳过了人们还在试着对于这个新科技的“人伦”讨论,已经进入到了下一个阶段——AI 正在与人类进行现实共构。

而这个共构本身,无论从心理上还是人伦上,都已经远超过人们还在聊到的“如何限制 AI”这么浅显的命题。


或许这只是一个类似小说剧情的猜测。但也或许,这个现实,正在一步步地被扭曲成那个“美丽新世界”。