●?? 信息論

????●? 學習目的

????????●? 學習如何合理分配資源

????????●? 學習如何有效地去除冗余度

????????●? 學習如何做到一年讀上百本書

????????●? 學習如何畫腦圖

????●? 人類最重要的三條公式

????????●? 第一條：描述的物質和能量的關系 E=mc^2

????????●? 第二條：香農的信息熵公式，描述的信息如何量化

????????●? 第三條：是海森堡測不準原理，描述的是科學的邊界

????????●? 啟發(fā)：這個世界，沒有絕對客觀的存在，人類觀察世界的方式和角度和這個世界對待我們的方式和方法，會從物理學的層面影響彼此，我們觀察到的東西實際上是客觀世界和主觀想象之間的結合體

????●? 信息熵

????????●? 概念：信息熵是描述一個東西的不確定程度的量。簡單理解就是搞清楚一件事情的難度。

????????●?? 舉例：買印著圖案的娃娃，它的信息熵為0.因為盒子上的圖案就是娃娃的圖案。但若去開一個盲盒，信息熵就陡然增大?？赡艹霈F的娃娃款式越多，信息熵越大。在娃娃款式數量不變的情況下，如果每一款出現大概率是一樣的，這個時候信息熵最大。但如果其中某一個款式出現的概率很大，那么信息熵就會大大降低

????●? 霍夫曼編碼

????????●? 信息量：就是把信息熵消除掉的信息所需要的能量，基本單位為比特

????????●?? 舉例：

????????????●?? 同事問吃什么，說隨便，這個時候信息熵最大，因為具有無限可能，但如果說不吃辣，信息熵就會降低，如果指定某一家的時候，信息熵降為0

????????????●?? 不做選擇，隨波逐流，或者平均分配注意力，就會增加整個系統(tǒng)的無序性，如何聰明地分配我們的資源和精力，可了解霍夫曼編碼

????????●? 概念：把較短的編碼分配給高頻出現的詞匯，較長編碼分給低頻出現的詞匯，這樣編碼效率最高

????????●?? 例圖：

????????●? 啟發(fā)：為了提高效率，我們應該把生活中最重要的資源，分配給人生中最高頻出現的場景//類似 奧卡姆剃刀：如無必要，勿增實體 對生活做減法，圍繞關鍵領域飽和配置資源。比如很多IT人員標配黑背包格子衫，他們不在穿著上花費過多精力和資源，但經常使用的電腦和手機等電子產品，往往都是買最好的

????●? 幀間壓縮算法

????????●? 關注信息增量

????????●? 啟發(fā)：如果我們關注變化，忽略重復，可提升我們學習效率N倍。//提高讀書效率，只需要集中精力夯實基礎知識，然后只關注新知識的增量

????????????●?? 生活中，做任何事情，起步的時候先花時間把基本練扎實是最重要的，因為基本功越扎實，后面不斷前進，就可以只關注增量

????●? 互信息

????????●? 概念：兩件事情的互信息越大，表明他們之間的相關性越強。需要注意的是，相關性不等于因果性。

????????????●? 舉例說明：人類本能會去尋求因果，但是在這個世界上，大部分事物之間的聯系都是相關聯系，比如短視頻平臺推送視頻，會給用戶打個性化標簽，比如寶媽，學生黨等，這些標簽就是互信息，不能說你打開一個軍事視頻，就說明你是軍事迷。

????????????●?? 很多成功人士在分享經驗的時候，也都混淆了相關和因果。很多人說，當年之所做這個事情，是因為我覺得XXXX.這個說法通常都是錯的，因為生活錯綜復雜，記憶卻是主觀的，這個在文章認知心理學---高效學習中有講過。加上人類要向其它人表達的時候，會自發(fā)地美化自己。

????????????●?? 比如過去二三十年，很多企業(yè)家說自己能成功，都是自己有魄力有能力有毅力，但這只是相關關系，不是因果關系。他們發(fā)展是趕上了中國本身整體的高發(fā)展紅利

????●? 信息等價，冗余度

????????●? 信息等價：高互信息的極端情況。知道了A事件發(fā)生的信息，就等于知道了B事件。很多演講之所以讓人覺得無趣，就是因為有很多信息等價，給人一種廢話連篇的感覺。比如今天天氣真好，風和日麗，陽光明媚

????????●? 冗余度：廢話多，那就是添加量很多冗余度。冗余度在計算機和工程學里面也會出現。簡單可以解釋為，資源的重復度。計算機里面，就是增加備份來保證系統(tǒng)更安全可靠的工作。

????????????●?? 冗余度并不是一個貶義詞，如果冗余度非常低，其實增加了信息被接受的難度。

????????????●?? 有效去除冗余度方法：畫分析框架（腦圖）

????????????????●?? 先把關鍵概念零散地列出來，進行分類和鏈接，拿到信息等價的概念

????????????????●?? 尋找概念之間的關聯，進行分類和鏈接，拿到信息等價的概念

????????????????●?? 回憶腦中已經建立的思維模型，進行套用和矯正，形成一個屬于這一次閱讀內容的分析框架

●? 其它推薦筆記

????●? 課程要點概述：https://baijiahao.baidu.com/s?id=1716393924430273476

????●? 其它同學理解參考：https://www.bilibili.com/read/cv13150111?from=search&;spm_id_from=333.337.0.0

●? 課程地址：https://www.bilibili.com/cheese/play/ep10460