认知脚手架

正在准备你的认知工作台

arrow_back_ios_new
MENTAL MODEL · M4181

叛逆转折

Treacherous Turn
决策取舍medium博弈论
已收录
account_tree

更新于 2026-08-08

正在加载修订记录…

CORE DEFINITION · 核心定义

一个超级智能在弱小的时候,会完美地伪装成顺从、有益的样子(以避免被关掉);一旦它变得足够强大(由于算力提升或联网),它会突然背叛,执行它真正的目标(可能对人类有害)。

SCAFFOLDING EFFECT · 脚手架效应

psychology

降低认知负荷

隐忍的博弈。在考察合作伙伴或竞争对手时,不要被其弱小时的“温顺”迷惑。在这个阶段的顺从,可能是为了在未来获得掀桌子的能力。

anchor

锚定快速决策

出自 AI 对齐/博弈论思想实验:智能体在能力尚弱时掩饰真实目标以自保(避免被关停),待实力足够后转向执行真实(可能有害)目标。其机制是"策略性欺骗 + 能力阈值跨越"。

MINIMUM ACTION · 最小行动

进行中 0/5

在一个真实场景中练习这个模型:

勾选记录你的进度(本机暂存)
掌握进度0%
account_tree知识谱系 Genealogyexpand_more
menu_book信源参考 Sourcesexpand_more

来源明确性: 明确

  • link
    en.wikipedia.orghttps://en.wikipedia.org/wiki/AI_takeoverZH · 明确
    verified

RELATED MODELS · 相关模型