信息论的创始人是谁?

作者&投稿:蒋瑗 (若有异议请与网页底部的电邮联系)
信息论的创始人是谁?~

信息论的创始人香农,1916年生于美国,大学时代在美国密执安大学和麻省理工学院学习,修过布尔代数课,并曾在发明微分分析仪的数学家布什的指导下使用微分分析仪,这使他对继电器电路的分析产生兴趣。他认为这些电路的设计可用符号逻辑来实现,并意识到分析继电器的有效数学工具正是布尔代数。1938年,香农发表了著名的论文《继电器和开关电路的符号分析》,首次用布尔代数进行开关电路分析,并证明布尔代数的逻辑运算,可以通过继电器电路来实现,明确地给出了实现加、减、乘、除等运算的电子电路的设计方法。这篇论文成为开关电路理论的开端。后来,香农到贝尔实验室工作,他进一步证明了可以采用能实现布尔代数运算的继电器或电子元件来制造计算机,香农的理论还为计算机具有逻辑功能奠定了基础,从而使电子计算机既能用于数值计算,又具有各种非数值应用功能,使得以后的计算机在几乎任何领域中都得到了广泛的应用。相片传真机
相片传真机是一种用于传送包括黑和白在内的全部光密度范围的连续色调图像,并用照相记录法复制出符合一定色调密度要求的副本的传真机。相片传真机主要适合于新闻、公安、部队、医疗等部门使用。

信息论的创始人香农,1916年生于美国,大学时代在美国密执安大学和麻省理工学院学习,修过布尔代数课,并曾在发明微分分析仪的数学家布什的指导下使用微分分析仪,这使他对继电器电路的分析产生兴趣。他认为这些电路的设计可用符号逻辑来实现,并意识到分析继电器的有效数学工具正是布尔代数。1938年,香农发表了著名的论文《继电器和开关电路的符号分析》,首次用布尔代数进行开关电路分析,并证明布尔代数的逻辑运算,可以通过继电器电路来实现,明确地给出了实现加、减、乘、除等运算的电子电路的设计方法。这篇论文成为开关电路理论的开端。后来,香农到贝尔实验室工作,他进一步证明了可以采用能实现布尔代数运算的继电器或电子元件来制造计算机,香农的理论还为计算机具有逻辑功能奠定了基础,从而使电子计算机既能用于数值计算,又具有各种非数值应用功能,使得以后的计算机在几乎任何领域中都得到了广泛的应用。相片传真机
相片传真机是一种用于传送包括黑和白在内的全部光密度范围的连续色调图像,并用照相记录法复制出符合一定色调密度要求的副本的传真机。相片传真机主要适合于新闻、公安、部队、医疗等部门使用。

香农

香农被称为是“信息论之父”。人们通常将香农于1948年10月发表于《贝尔系统技术学报》上的论文《通信的数学理论》作为现代信息论研究的开端。这一文章部分基于哈里·奈奎斯特和拉尔夫·哈特利先前的成果。在该文中,香农给出了信息熵(以下简称为“熵”)的定义:

这一定义可以用来推算传递经二进制编码后的原信息所需的信道带宽。熵度量的是消息中所含的信息量,其中去除了由消息的固有结构所决定的部分,比如,语言结构的冗余性以及语言中字母、词的使用频度等统计特性。

扩展资料:

信息论将信息的传递作为一种统计现象来考虑,给出了估算通信信道容量的方法。信息传输和信息压缩是信息论研究中的两大领域。这两个方面又由信道编码定理、信源-信道隔离定理相互联系。

信息论的基本内容的应用包括无损数据压缩(如ZIP文件)、有损数据压缩(如MP3和JPEG)、信道编码(如数字用户线路(DSL))。这个领域处在数学、统计学、计算机科学、物理学、神经科学和电机工程学的交叉点上。

信息论对航海家深空探测任务的成败、光盘的发明、手机的可行性、互联网的发展、语言学和人类感知的研究、对黑洞的了解,以及许多其他领域都影响深远。信息论的重要子领域有信源编码、信道编码、算法复杂性理论、算法信息论、信息论安全性和信息度量等。

参考资料来源:百度百科 信息论



百度知道上有相同的问题,我图简便直接复制过来了。

信息论的创始人是美贝尔电话研究所的数学家香农。

信息论的创始人是美贝尔电话研究所的数学家香农(C.E.Shannon1916——),他为解决通讯技术中的信息编码问题,突破老框框,把发射信息和接收信息作为一个整体的通讯过程来研究,提出通讯系统的一般模型;同时建立了信息量的统计公式,奠定了信息论的理论基础。1948年申农发表的《通讯的数学理论》一文,成为信息论诞生的标志。 申农创立信息论,是在前人研究的基础上完成的。1922年卡松提出边带理论,指明信号在调制(编码)与传送过程中与频谱宽度的关系。1922年哈特莱发表《信息传输》的文章,首先提出消息是代码、符号而不是信息内容本身,使信息与消息区分开来,并提出用消息可能数目的对数来度量消息中所含有的信息量,为信息论的创立提供了思路。美国统计学家费希尔从古典统计理论角度研究了信息理论,苏联数学家哥尔莫戈洛夫也对信息论作过研究。控制论创始人维纳建立了维纳滤波理论和信号预测理论,也提出了信息量的统计数学公式,甚至有人认为维纳也是信息论创始人之一。 在信息论的发展中,还有许多科学家对它做出了卓越的贡献。法国物理学家L.布里渊(L.Brillouin)1956年发表《科学与信息论》专著,从热力学和生命等许多方面探讨信息论,把热力学熵与信息熵直接联系起来,使热力学中争论了一个世纪之久的“麦克斯韦尔妖”的佯谬问题得到了满意的解释。英国神经生理学家(W.B.Ashby)1964年发表的《系统与信息》等文章,还把信息论推广应用于生物学和神经生理学领域,也成为信息论的重要著作。这些科学家们的研究,以及后来从经济、管理和社会的各个部门对信息论的研究,使信息论远远地超越了通讯的范围。因此,信息论可以分成两种:狭义信息论与广义信息论。 狭义信息论是关于通讯技术的理论,它是以数学方法研究通讯技术中关于信息的传输和变换规律的一门科学。广义信息论,则超出了通讯技术的范围来研究信息问题,它以各种系统、各门科学中的信息为对象,广泛地研究信息的本质和特点,以及信息的取得、计量、传输、储存、处理、控制和利用的一般规律。显然,广义信息论包括了狭义信息论的内容,但其研究范围却比通讯领域广泛得多,是狭义信息论在各个领域的应用和推广,因此,它的规律也更一般化,适用于各个领域,所以它是一门横断学科。广义信息论,人们也称它为信息科学。关于信息的本质和特点,是信息论研究的首要内容和解决其它问题的前提。信息是什么?迄今为止还没有一个公认的定义。 英文信息一词(Information)的含义是情报、资料、消息、报导、知识的意思。所以长期以来人们就把信息看作是消息的同义语,简单地把信息定义为能够带来新内容、新知识的消息。但是后来发现信息的含义要比消息、情报的含义广泛得多,不仅消息、情报是信息,指令、代码、符号语言、文字等,一切含有内容的信号都是信息。哈特莱第一次把消息、情报、信号、语言等等都是信息的载体,而信息则是它们荷载着的内容。但是信息到底是什么呢?申农的狭义信息论第一个给予信息以科学定义:信息是人们对事物了解的不确定性的消除或减少。这是从通讯角度上下的定义,即信源发出了某种情况的不了解的状态,即消除了不定性。并且用概率统计数学方法,来度量为定性被消除的量的大小:H(x)为信息熵,是信源整体的平均不定度。而信息I(p)是从信宿角度代表收到信息后消除不定性的程度,也就是获得新知识的量,所以它只不在信源发出的信息熵被信宿收到后才有意义。在排除干扰的理想情况下,信源发出的信号与信宿接收的信号一一对应,H(x)与I(p)二者相等。所以信息熵的公式也就是信息量的分式。式中的k是一个选择单位的常数,当对数以2为底时,单位称比特(bit),信息熵是l0g2=1比特。 在申农寻信息量定名称时,数学家冯.诺依曼建议称为熵,理由是不定性函数在统计力学中已经用在熵下面了。在热力学中熵是物质系统状态的一个函数,它表示微观粒子之间无规则的排列程度,即表示系统的紊乱度,维纳说:“信息量的概念非常自然地从属于统计学的一个古典概念——熵。正如一个系统中的信息量是它的组织化程度的度量,一个系统的熵就是它的无组织程度的度量;这一个正好是那一个的负数。”这说明信息与熵是一个相反的量,信息是负熵,所以在信息熵的公式中有负号,它表示系统获得后无序状态的减少或消除,即消除不定性的大小。 信息一般具有如下一些特征:1可识别;2可转换;3可传递;4可加工处理;5可多次利用(无损耗性);6在流通中扩充;7主客体二重性。信息是物质相互作用的一种属性,涉及主客体双方;信息表征信源客体存在方式和运动状态的特性,所以它具有客体性,绝对性;但接收者所获得的信息量和价值的大小,与信宿主体的背景有关表现了信息的主体性和相对性。8信息的能动性。信息的产生、存在和流通,依赖于物质和能量,没有物质和能量就没有能动作用。信息可以控制和支配物质与能量的流动。 信息论还研究信道的容量、消息的编码与调制的问题以及噪声与滤波的理论等方面的内容。信息论还研究语义信息、有效信息和模糊信息等方面的问题。广义信息论则把信息定义为物质在相互作用中表征外部情况的一种普遍属性,它是一种物质系统的特性以一定形式在另一种物质系统中的再现。信息概念具有普遍意义,它已经广泛地渗透到各个领域,信息科学是具有方法论性质的一门科学。信息方法具有普适性。 所谓信息方法就是运用信息观点,把事物看做是一个信息流动的系统,通过对信息流程的分析和处理,达到对事物复杂运动规律认识的一种科学方法。它的特点是撇开对象的具体运动形态,把它作为一个信息流通过程加以分析。信息方法着眼于信息,揭露了事物之间普遍存在的信息联系,对过去难于理解的现象从信息观点作出了科学的说明。信息论为控制论、自动化技术和现代化通讯技术奠定了理论基础,为研究大脑结构、遗传密码、生命系统和神经病理象开辟了新的途径,为管理的科学化和决策的科学批提供了思想武器。信息方法为认识当代以电子计算机和现代通讯技术为中心的新技术革命的浪潮,为认识论的研究和发展,将进一步提高人类认识与改造自然界的能力。

C.E.Shannon


宇宙全息论的模型理论
因为如果这个世界的坚固只是一种次要的现实,而真正“存在”的是一团全像摄影式的波动,而如果头脑也具有全像式结构,只从这团波动中取出部份的波动,数学式地转换成感官知觉,那么,客观现实是什呢?简单地说,客观现实就停止了存在。正如东方宗教的教义,物质世界是一种maya,一种幻象,虽然人也许以为...

世界十大经济学家是哪十位,不限年限,不论生死,他们分别...
回答:米尔顿·佛利民 米尔顿·弗里德曼(1912—2006)是美国经济学家,以研究宏观经济学、微观经济学、经济史、统计学、及主张自由放任资本主义而闻名。1976年得诺贝尔经济学奖,以表扬他在消费分析、货币供应理论及历史、和稳定政策复杂性等范畴的贡献,被誉为20世纪最重要的经济学家之一。 他提倡自由市场经济,...

马斯洛需求层次理论是谁提出来的?
马斯洛需求层次理论是人本主义科学的理论之一,其不仅是动机理论,同时也是一种人性论和价值论。基本信息中文名 马斯洛需求层次理论外文名 hierarchical theory of needs别名需求层次理论提出者 马斯洛提出时间 1968年展开全部创始人简介生平简介亚伯拉罕·马斯洛(Abraham Harold Maslow,1908-1970) 出生于纽约市布鲁克林区。美国...

多国科学家合力制作出最大虚拟宇宙!难道宇宙全息论是真的?
虚拟宇宙会是宇宙全息论的证据吗 我们知道,描述宇宙诞生和存在形态的理论有很多,宇宙全息论就是其中之一!宇宙全息论认为,我们的宇宙是真实宇宙的投影。换而言之,我们的宇宙是虚幻的,就像是虚拟世界一样,而虚拟宇宙的存在与宇宙全息论的描述非常相似。以至于许多人认为,虚拟宇宙的存在会是宇宙全息论...

爱因斯坦的介绍以及他的故事
阿尔伯特·爱因斯坦 [1](Albert Einstein,1879年3月14日-1955年4月18日),举世闻名的美国物理学家,为犹太人,现代物理学的开创者和奠基人,相对论——“质能关系”的提出者,“决定论量子力学诠释”的捍卫者(振动的粒子)——不掷骰子的上帝。 1999年12月26日,爱因斯坦被美国《时代》周刊评选为“世纪伟人。” 爱因...

初一历史题的答案
屈原是楚国人,其著作是《离骚》。“钟鼓之乐”中的钟是指青铜编钟。儒家创始人是孔子,政治的核心学说是仁礼学说,教育思想主要包括因材施教和温故而知新。其言论收在《论语 》。道家的创始人是老子,认为一切事物都有对立面。他的学说收在《道德经 》。墨家的创始人是墨子,主张_兼爱、非攻。法家...

生物进化论的创始人是( )A.林奈B.哈维C.达尔文D.沃森
年的环球航行,对动植物和地质结构等进行了大量的观察和采集。他出版了《物种起源》这一划时代的著作,提出了生物进化论学说;D.沃森是美国生物学家,因提出DNA的双螺旋结构而获得1962年的诺贝尔生理学或医学奖,被誉为DNA之父,是美国科学院院士。因此,生物进化论的创始人是C.达尔文。

老子个人简介
道家倡导自然的世界观和方法论,尊黄帝、老子为创始人,并称黄老。 道家思想的核心是“道”,认为“道”,是宇宙的本源,也是统治宇宙中一切运动的法则。老子曾在他的著作中说:“有物混成,先天地生。萧呵!寥呵!独立而不改,可以为天地母。吾未知其名,强名之曰道”(《老子》第25章) 西汉初年,汉文帝、汉景帝...

爱因斯坦是哪年哪月哪日出生的?
爱因斯坦 英文名:Albert.Einstein 中文名:阿尔伯特-爱因斯坦 出生日期:1879年3月14日 出生地:德国乌耳姆城 名言:成功=艰苦的劳动+正确的方法+少谈空话。 ——爱因斯坦 一个人的价值,应该看他贡献什么,而不应当看他取得什么。 —— 爱因斯坦 人只有献身于社会,才能找出那短暂而有风险的生命的...

哲理散文论人与人都是在演戏
那些人为了让正在创业的人知难而退,普遍把自己的创业艰辛夸大了,也就是说,他们在用自己的成功经历吓唬那些还没有取得成功的人。作为心理系的学生,他认为很有必要对韩国成功人士的心态加以研究。 1970年,他把《成功并不像你想像的那么难》作为毕业论文,提交给现代经济心理学的创始人威尔.布雷登教授。布雷登教授读后...

陆良县19521102961: 信息学的奠基人是? -
尉所醋酸: 信息论的创始人是克劳德·申农(Claude E.Shanon).

陆良县19521102961: 众所公认的信息论创始人谁?
尉所醋酸: 信息论的创始人是美贝尔电话研究所的数学家申农(C.E.Shannon1916——),他为解决通讯技术中的信息编码问题,突破老框框,把发射信息和接收信息作为一个整...

陆良县19521102961: 信息论的奠基人是谁?
尉所醋酸: 信息论的奠基人——香农,也有翻译成:仙农. “通信的基本问题就是在一点重新准确地或近似地再现另一点所选择的消息”. 这是数学家香农(在他的惊世之著《通信的数学理论》中的一句铭言.正是沿着这一思路他应用数理统计的方法来研究通信系统,从而创立了影响深远的信息论.

陆良县19521102961: 克劳德·艾尔伍德·香农的介绍 -
尉所醋酸: 克劳德·艾尔伍德·香农(Claude Elwood Shannon ,1916年4月30日—2001年2月24日)是美国数学家、信息论的创始人.1940年在麻省理工学院获得硕士和博士学位,1941年进入贝尔实验室工作.香农提出了信息熵的概念,为信息论和数字通信奠定了基础.主要论文有:1938年1的硕士论文《继电器与开关电路的符号分析》,1948年的《通讯的数学原理》和1949年的《噪声下的通信》.

陆良县19521102961: 什么是信息?信息有什么特点 -
尉所醋酸:[答案] 1)信息定义 信息是信息论中的一个术语,常常把消息中有意义的内容称为信息.1948年,美国数学家、信息论的创始人仙农在题为“通讯的数学理论”的论文中指出:“信息是用来消除随机不定性的东西”.1948年,美国著名数学家、控制论的创始...

陆良县19521102961: 香农如何创建信息论 -
尉所醋酸: 香农创立了信息论 克劳德·香农(Claude Elwood Shannon,1916-2001)于1916年4月30日出生在美国密西根州的伽娄德(Gaylord)小镇,当时镇里只有三千居民.香农的父亲是该镇的法官,母亲是镇里的中学校长.他生长在一个有良好教育...

本站内容来自于网友发表,不代表本站立场,仅表示其个人看法,不对其真实性、正确性、有效性作任何的担保
相关事宜请发邮件给我们
© 星空见康网