tft每日頭條

 > 生活

 > 香農提出了信息熵的概念

香農提出了信息熵的概念

生活 更新时间:2024-10-04 04:36:36
今天我們講一位對現代科技有非常突出貢獻的人,他就是克勞德·艾爾伍德·香農,香農是美國數學家信息論的創始人。

香農提出了信息熵的概念(信息論的創立者-香農)1

在1916年香農出生于美國密西根州。他在密西根州的一個小鎮長大。當時這個鎮隻有幾千個居民,香農的父親是這個鎮的法官。母親是鎮裡的中學校長。所以香農小時候就有一個非常好的生長環境。香農的科學影響很大程度上來源于他的祖父。香農的祖父是一位農場主,并且也喜歡發明一些東西,這對小時候香農有着直接的影響。

并且香農與愛迪生也是遠房親戚。在1936年香農畢業于密歇根大學,并且獲得了數學和電子工程學士學位,在1940年獲得了麻省理工學院數學博士學位和電子工程碩士學位。在1941年香農加入了貝爾實驗室數學部工作到了1972年。

在1956年香農成為了麻省理工院客座教授,并且在1958年成為了終身教授在1978年成為了麻省理工學院的名譽博士。

香農提出了信息熵的概念(信息論的創立者-香農)2

香農在1940年在普林斯頓高級研究所工作期間開始思考信息論與有效通信系統的問題,經過了八年的努力,香農在1948年發表了具有深遠影響的論文。在1949年向榮又在發表了另一篇著名的論文在這兩篇論文中香農闡明了通信的基本問題,給出了通信系統的模型,提出了信息量的數學表達式,并且解決了信道容量,信源統計特性,信源編碼,信道編碼等一系列基本技術問題,這兩篇論文也成信息論奠定性的著作。

在1938年香農在麻省理工學院獲得了電氣工程碩士學位。在他的碩士論文中已經注意到了電話交換電路與布爾代數之間的類似性。就是布爾代數的“真”與“假”和電路系統的開與關對應起來,并用1和0表示出來。

在讀書期間香農還用部分的時間跟布什教授進行了微分分析器的研究這種分析器是最早的機械模拟計算機,這個機器是用來獲得常微分方程的數值解,在1914年香農發表了微分分析器的論文。

香農提出了信息熵的概念(信息論的創立者-香農)3

香農最重要的貢獻就是提出了香農理論,香農理論中最重要的特征是的熵概念他證明熵與信息内容的不确定程度有等價關系。你曾經是玻爾茲曼在熱學第二定律引入的概念。香農把它理解為分子運動看到混亂度信息熵也有類似的意義。

在1948年香農在長達數十頁論文在這十篇論文成了信息論誕生的裡程碑。在香農的通信數學模型中清楚的提出了信息的度量問題香農把哈特利的公式擴大到概率不同的情況,得到了著名的計算公式熵H的公式。

香農在進行信息的定量計算的時候明确的把信息量定義為随機不定性程度的減少。這就表明他對信息的理解。雖然香農的信息概念比以往的認識有了巨大的進步,但仍然存在的局限性,這一概念同樣沒有包含信息的内容和價值,隻是考慮了随機性的不定性,沒有從根本上解決問題。

雖然香農在大衆面前并不是非常的知名,但是他是使我們的世界能夠進行即時通信少數科學家和思想家之一。香農獲得過許多的榮譽和獎項。香農所接受的榮譽學位也數不勝數。

香農提出了信息熵的概念(信息論的創立者-香農)4

在1958年香農成為了麻省理工學院的教授直到1978年退休,香農在2001年去世,享年84歲。

謝謝各位看官的欣賞,你對香農有什麼認識和了解,請留下你的評論!如果喜歡請關注,轉發,收藏!謝謝!我們下期再見。

,

更多精彩资讯请关注tft每日頭條,我们将持续为您更新最新资讯!

查看全部
fit

相关生活资讯推荐

热门生活资讯推荐

网友关注

Copyright 2023-2024 - www.tftnews.com All Rights Reserved