# 信息论

> > 将世界视为信息的流动和处理过程。

- ID: m07571
- 分类: system
- 领域: 系统论

## 定义

> 将世界视为信息的流动和处理过程。核心观点是"信息是用来降低不确定性的工具" 。- 作用/适用场景： 定义问题与解法。帮助你判断一个动作是否有效——只有能降低系统不确定性的动作，才是真正的信息获取，否则只是噪音 。

## 机制

香农创立的信息论把"信息"定义为消除不确定性的量（以熵度量），通信即编码-传输-解码以对抗噪声。核心思想：信息的价值在于它降低了接收方的不确定性；与语义无关，只关概率与结构。由此派生出信道容量、冗余、压缩等概念。

## 练习

1）遇到动作/决策，先问"它是否降低了不确定性"；2）若是噪音（不降不确定性）则削减；3）用编码/压缩去除冗余、用冗余（校验）对抗噪声；4）把问题重述为"降低哪类不确定性"。

## 脚手架用法

> 将世界视为信息的流动和处理过程。

[阅读网页](https://thinkingmodels.site/entries/detail/m07571)