学会重构与对比 ——码农鼻祖天才香农
我不僅僅滿足于向這臺大腦里輸入數據,還希望把文化的東西灌輸進去。
——?克勞德·香農
1948年,一篇名為《通信的數學原理》的論文發表,這可能是20世紀最負盛名的論文之一,迄今被引用已突破11萬次。
106年前的今天,天才香農誕生,以一己之力將通信問題從物理領域抽象出來,發現了可以利用概率對信息交流的關鍵原理——不確定性建模,?將一門工程領域的藝術問題變成可度量可控的科學。
?
克勞德·香農??Claude?Shannon
(1916 年 4 月 30 — 2001年2月24日)
通信是否存在大統一的理論?
106年的今天,信息時代的奠基者,信息理論的創始人克勞德·香農誕生。他是一名美國數學家、電子工程師和密碼學家。?
在香農之前,通信問題被看作是一個工程問題——關于確定性的信號重構,即如何變換被物理介質扭曲的接收信號,以盡可能準確地重建原始信號。
香農天才地發現了信息交流的關鍵在于不確定性,從而將一個藝術性的工程問題變成了一門可度量的科學問題。
在不確定性和概率的框架下,香農在他的里程碑式的論文中系統地確定了通信的基本理論。
香農的模型包含了兩個關鍵的見解:從需要設計的通信系統中隔離信息和噪聲源,以及對這兩個源進行概率建模。
發射器將信號好編碼成信號,信號被噪聲破壞,然后由接收器解碼。
The best is yet to come .
We have only scratched the surface,
computers can only do what we tell them now ,
but it will be different in the future .
——??Claude?Shannon
天才怎樣進行思考
在被問到天才有什么特質時,香農說了一個圖靈告訴他的類比,圖靈由自己觀察到的現象做推斷,告訴香農:“?有些人,你告訴他一個點子,他能回你半個點子;還有些人,你告訴他一個點子,他能回你兩個點子?!?/span>
香農實際上想說的是,要想有好點子,就要善于增加每次輸入的精華。如果沒有領悟好點子的本質,最終想法可能就會變得平庸。 只有越觸及問題的本質,得出真知灼見的概率才越大。
一,【0】和【1】與【真】和【假】
《繼電器與開關電路的符號分析》,香農將布爾代數的數學學科應用于開關電路的分析和合成——布爾代數的【真】和【假】與電路系統的【開】和【關】對應起來,用【0】和【1】表示。
這是變革型的工作,也是數字電路設計的起點。
香農告訴我們,這個世界所有的信息都可以用0和1來表示。
人類從工業時代進入了信息時代。
二,信息的性質 VS 【反直覺】的比特
?信息論舉世之作 ——《通信的數學原理》
“ 信息是什么?信息的多少到底如何度量?”香農創造性地采用概率論的方法來研究通信中的問題。
香農在他的論文《通信的數學原理》中,描述了創造性地采用概率論的方法研究通信問題的思路。通過把通信的基本問題歸結為通信的一方能以一定的概率復現另一方發出的消息,并針對這一基本問題對信息給予科學的定量描述,第一次提出了信息熵的概念。
此外,香農還定義了信源、編碼、信道、譯碼、信宿等概念,建立了通信系統的數學模型,這就是著名的香農模型,并得出了信源編碼定理和信道編碼定理。
他的定理導致了一些違反直覺的結論。
A、事實上,熵的概念可以作為壓縮的基本極限。
—— 香農發明了新的數學來描述通信定律,引入了新的思想,如概率模型的熵率。
B、比特可以作為信息的通用貨幣統治世界。
—— 香農研究的是傳播理論,但實際上同時也是一種關于信息如何產生和傳遞的理論,從而開創了信息論。
所有的問題都有自己的形式。在香農完美解決各領域的核心問題之前,他告訴著我們:先理解問題本身。
尋找答案當然很重要,但提問本身是有方法的,提出能解答、有答案的問題也很重要。
TIPS: 學會重構和對比
從香農寫信給導師萬尼瓦爾·布什,在思考通信是否存在大統一的理論問題時,他想到了用于情報傳遞的一般系統的基本特性二者之間的關聯;到轉行去研究遺傳學,將遺傳學和數學結合,寫出博文《理論遺傳學的代數學》;再順便跨界到密碼學領域,幫助加密丘吉爾和羅斯福的越洋會議內容...
香農曾在Bells Labs上發表演講,講解自己思考的過程,詳細提到自己在需要解決的問題面前,是怎樣讓思考過程更具創意的。
除了找出問題的核心,他還提到了創意型思考。
聯系邏輯可以不那么嚴密,甚至看上去會像巧合,但是這些“神奇的錯位“,能給新型的思維方式創造空間!
在具體使用時可以重構問題,做對比,聯想,可以夸張、縮短問題的文字、轉換問的角度...?
?
這個問題最好的解決方法是什么?
最壞的解決方法是什么?
每個輸入的信息都可以找到它的本質。
—— 既需要批判性思考,也需要創意思維。
回顧香農輝煌的一生,年輕時開始在世界上被逐漸推崇,成為美國科學院和工程院院士,到獲得各大國內國際榮譽獎項...
總結
以上是生活随笔為你收集整理的学会重构与对比 ——码农鼻祖天才香农的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 《Gans in Action》第一章
- 下一篇: 搭建 ownCloud 私有云教程