网站首页  词典首页

请输入您要查询的字词:

 

字词 信息论
类别 中英文字词句释义及详细解析
释义

信息论

研究信息的计量、传递、变换和储存的科学。信息论已发展为信息学,并被广泛地用于语言学领域,形成信息语言学。从信息论的角度说,修辞学研究社会信息传递的效果。

信息论

信息论

研究信息传输和信息处理的一门新兴学科。信息,是音信、消息的意思、信息论用数学方法研究信息的计量、传递、变换和贮存等。
信息并不陌生,信息论也不神秘。首先,信息是可以识别的,可以通过感官直接识别,也可以通过探测手段间接识别。其次,信息是可以转换的,如语言、文字、图象、图表等信息形式,与计算机的代码,广播、电视、电信的信号,可以互相转换。再次,信息是可以再生的,计算机将收集的信息可以用显示、打印、绘图等形式再生出来。第四,信息是可以储存的,如把大量数据、资料作为信息储存在电子计算机的储存装置内。其它的信息是可以处理的,是可以传递的,等等。
信息论借助数学理论揭示了信息与熵的关系,认为系统的熵给出系统的无序程度的度量,信息则给出系统的有序程度的度量,因而信息即为负熵,从而使信息成为关于表征系统的组织性、有序性的概念。
信息论方法,就是用信息论的观点,把系统的有目的性运动过程抽象为一个信息变换过程,仅以信息的流程加以综合考察,以掌握某个复杂系统的整体性状态和性能的方法。因而信息论方法已成为研究事物的复杂性、系统性和整体性的一般科学方法。
信息论的创始人和奠基人是美国贝尔电话研究所的数学家申农;也有人认为维纳也是创始人之一。信息论创始之后,经历了50年代的创新时期,60年代的消化时期和70年代的发展时期; 现在,它已被广泛地应用到自然科学和社会科学的不同领域。用信息论研究文艺的结果,已诞生了文艺信息学。

☚ 反馈信息   文艺信息学 ☛
信息论

信息论xinxilun

以通信为背景,研究信息度量、传递和处理的一般规律的科学理论。1948年美国数学家C.E.仙农(Shannon)发表了著名长篇论文“通信的数学理论”,奠定了信息论的科学理论基础,以后逐渐发展成现代通信的基础理论。最近人们将信息的定义推广,信息论也逐渐被用来讨论在一般过程中人们如何获取信息、处理信息以及利用这些信息来解决系统演化和进行决策的有效理论。
信息论的主要内容在于给出了在通信意义下的信息定义,找到了信息传递系统的性能:信源具有的最大可能信息量,在一定失真度下必须传递的最小信息量,信道可能通过的最大信息容量等,以及这些量与系统的关系。信息论还建立了一组重要的编码定理,指出了应当遵循的信息处理(编码)的原则和方法。上述信息论属于狭义信息论的内容,它不考虑信息的语义内容,仅考虑它们的语法(形式)内容,因此只能用在通信工程上,不能用在如决策理论、思维科学、经济科学等学科中。现代信息论给出研究客观世界的信息方法,它包括信息分析方法和信息综合方法,前者指在分析复杂系统运动时,要从分析系统信息入手,研究系统内信息运动过程,建立信息模型,达到分析系统的目的;后者指在设计复杂系统时首先按照需要给出合理的信息模型,保证信息的演化、存贮、输出满足要求,然后再利用技术手段来实现信息模型,从而达到设计复杂系统的目的。
现代研究表明:物理学仅研究物质、能量的运动,已无法解决复杂系统的演化问题,信息论也不仅仅是通信过程需要研究的内容,物理学需要研究信息、信息论中也必须引入物理的方法。随着物理学和信息论的结合,必将促进物理学的发展,也将使信息论提高到一个新的水平。

☚ 控制论   突变论 ☛

信息论

信息论xinxilun

应用数学和其他科学方法研究系统中的信息传递和处理,信息识别和利用的共同规律的科学。
人类自诞生以来,一时一刻都没有离开过信息。信息论诞生前,人类用语言、文字、烽火以及各种电讯设备不自觉地利用着信息。随着社会生产的发展,信息的重要性日益显著。20世纪20年代以后,如何提高传递信息的能力和可靠性成为普遍重视的研究课题。40年代末,英国的费希尔,美国的申农和维纳三位数学家从不同角度研究信息,建立了信息论。其中,申农于1948年出版的《关于通讯的数学理论》一书,被认为是信息论诞生的标志。申农第一次从理论上阐明了通讯的基本问题,提出了通讯系统的数学模型,并找到了度量信息量的公式。70年代以来,随着数学计算机的广泛运用和社会信息化的发展,信息论正在逐渐突破申农等人建立的经典信息论,向更广阔的领域发展。
信息论的诞生,结束了人类不自觉地认识和利用信息的状态,对于推动现代科学的发展,促进社会信息化,具有重大意义。信息论所揭示的规律具有高度的普遍性。现在,它已被广泛运用于生物学、生理学、心理学、语言学和经济学等不同的领域,取得了丰硕的成果。

☚ 系统科学   耗散结构论 ☛

信息论

见“哲学”中的“信息论”。


信息论

利用数学方法,研究信息的存储、计量、提取、加工、传递和变换规律的一门科学。于20世纪40年代建立起来的新兴学科。奠基人是美国科学家申农(C. Elwood Shanon,1916—)。他应用概率统计和数理统计,从量的方面来研究信息问题。其主要任务是把通讯的全部设备和过程当作一个系统来考察,提高传输信息的效能,保证传输信息的完整。它还包括噪声理论、信号滤波与预测、调制与信息处理等问题。目前已从通讯领域渗入各个科学技术领域,获得广泛运用。


信息论

见“逻辑学”中的“信息论”。


信息论

研究信息及其发展规律的一门学科。企业计划的依据和实施管理的手段。通过数据、凭证、图纸、报表、指令等形式反映客观世界中各种事物的特征和变化的程度。参见“哲学”部分“信息论”。


信息论

利用数学方法,研究信息的传送、变换和储存,特别是信息量计算的一门学科。所谓信息是指对消息接受者来说预先不知道的报道。它的任务在于解决通信上的两个基本问题:提高传送消息的效率和保证传送消息的完整。因此它对通信技术有重大意义。在计算技术、自动控制和遗传学等方面也有应用。

信息论

信息论information theory

关于信息及其传输的基本规律的理论。狭义指研究通信和控制系统中信息处理和信息传递的普遍规律以及如何提高信息传递系统的有效性和可靠性的一 门通信理论;广义指利用狭义信息论观点来研究一切问题的理论。创始人是美国数学家香农(Claude Elwood Shannon,1916~)。他在1948年发表的《通信的数学理论》一文,奠定了信息论的基础。他认为通信的基本问题就是精确地或近似地在一点复现另一点选择的信号。一般的通信过程包括五个基本部分:信息源、发送机(编码器)、信道、接收机(解码器)和信息接收者(信宿)。他从理论上阐明了信源、信宿、信道和编码等有关通信方面的一些基本问题,创立了通信系统模型;建立了度量信息量的公式;初步解决了如何从信息接受端提取由信息源发来信息的技术问题;提出了充分利用信道的信息容量,在有限的信道中以最大的速率传递最大的信息量的基本途径;并着手解决充分表达信息源的信息,较好地利用信道容量的有关编、译问题。对信息论作出独特贡献的还有维纳(Norbert Wiener,1894~1964)。他在《平稳时间序列的外推、内摘和平滑化》、《控制论》等论著中对信息概念作了解释;建立了著名的维纳滤波理论和信号预测理论;阐明了信息定量化的原则和方法;并独立地提出了度量信息量的公式,为信息论的应用开辟了广阔的前景。当前,信息论已推广和渗透到科学技术的各个领域,不但推动了这些学科的发展,而且也促进了系统的信息科学的形成和发展。

☚ 熵   信息量 ☛

信息论

运用数学方法,研究信息的计量、传递变换和储存的一门学科。

信息论

信息论

研究信息过程一般规律的学科。20世纪40年代末,英国的费希尔、美国的申农和维纳分别从不同的角度研究信息,建立了信息论。申农1948年出版的《关于通讯的数学理论》一书被认为是这门学科诞生的标志。信息论的主要研究内容包括: 信息的变换和传递,信息的度量,信息的特征,信息方法等。当前信息论不仅是通信技术的基础理论,而且广泛应用于许多不同的领域。信息论是近年来我国介绍和研究得较多的一门新学科。

☚ 信使报   信息工业 ☛
信息论

信息论

信息论是探讨信息的本质,并用数学方法研究信息的计量、传递、变换和存储,研究信息传递和信息处理系统中一般规律的新兴学科。核心问题是信息传输的有效性和可靠性以及两者间的关系。可有三种理解:狭义信息论,主要研究消息的信息量、信道容量以及消息的编码问题,一般信息论,主要研究通讯问题,包括噪声理论、信号滤波与预测、调制与信息处理等问题,广义信息论,包括狭义信息论和一般信息论,以及所有与信息有关的领域。
信息论萌芽于20世纪20年代,1924年—1928年,美国的奈奎斯特和哈特莱最早研究通信系统传输信息的能力,首先提出通信中的信息量概念,并试图度量系统的信息容量。1948年,美国数学家,麻省理工学院电气工程师C.E.香农发表了一篇讨论信源和信道特性的权威性论文《通信的数学理论》,奠定了现代信息论的基础,使信息论形成一门独立的学科。香农用负熵作为信息的度量,成功地解决了信息传输的基本问题。50年代,人们一方面在理论上阐明和推广香农的研究成果,把信息论置于严谨的数学基础上,另一方面发展了纠错码的理论和应用。60年代,在此基础上进一步发展,建立了信源编码的失真率理论,研究了最优信号集,发明了卷积码的序列译码和维特比译码技术。70年代,卫星通信和计算机技术的迅速发展给信息论以新的动力。各种多用户通信模型的信息传输理论获得了迅速发展。信息论已经发展成为 一门拥有众多分支的新兴学科。
信息论研究的基本问题之一是信息的度量。对于应用范围如此广泛的信息提出一个统一的度量是困难的。美国数学家C.E.香农在1948年提出信息熵作为信息量的测度。根据人们的实践经验,一个事件给予人们的信息量多少,与这一事件发生的概率(可能性)大小有关。一个小概率事件的发生,如“唐山发生七级以上大地震”使人们感到很意外和震惊,它给人们的信息量就很多。相反一个大概率事件的出现,如“12月15日北京未下雪”给人们的信息量就很少。因此,用


I(A)=-logP(A)IP

(A)表示事件A发生的概率来度量事件A给出的信息量,称为事件A的自信息量。若一次试验有M个可能结果(事件),或一个信源可能产生M个消息(事件),它们出现的概率分别用P1 ,P2 ……PM,则用H=-来度量一次试验或一个消息所给出的平均信息量。当对数取2为底时,单位为比特,当对数取e为底时,则单位为奈特,H的表达式与熵的表达式差一个负号,故称负熵或信息熵。
信息论的意义和应用范围已超出通信的领域。自然界和社会中有许多现象和问题,如生物神经的感知系统、遗传信息的传递等,均与信息论中研究的信息传输和信息处理系统相类似。因此信息论的思想对许多学科如物理学、生物学、遗传学、控制论,计算机科学、数理统计学、语言学、心理学、教育学、经济管理、保密学研究等都有一定的影响和作用。另一方面,由于借助负熵定义的信息量只能反映符号出现的概率分布(不肯定性),不能反映信息的语义和语用层次。一篇重要的报告和一篇胡说乱道的文章可以具有同样的信息,这显然不符合常识。因此现阶段信息论的应用又有很大的局限性。把信息的质量推广到适合于语义信息和语用信息的情况,至今没有显著进展。
☚ 信息技术的内容   信息论美学 ☛
信息论

信息论

信息论是探讨信息的本质,并用数学方法研究信息的计量、传递、变换和存储,研究信息传递和信息处理系统中一般规律的新兴学科。核心问题是信息传输的有效性和可靠性以及两者间的关系。可有三种理解:狭义信息论,主要研究消息的信息量、信道容量以及消息的编码问题,一般信息论,主要研究通讯问题,包括噪声理论、信号滤波与预测、调制与信息处理等问题,广义信息论,包括狭义信息论和一般信息论,以及所有与信息有关的领域。
信息论萌芽于20世纪20年代,1924年—1928年,美国的奈奎斯特和哈特莱最早研究通信系统传输信息的能力,首先提出通信中的信息量概念,并试图度量系统的信息容量。1948年,美国数学家,麻省理工学院电气工程师C.E.香农发表了一篇讨论信源和信道特性的权威性论文《通信的数学理论》,奠定了现代信息论的基础,使信息论形成一门独立的学科。香农用负熵作为信息的度量,成功地解决了信息传输的基本问题。50年代,人们一方面在理论上阐明和推广香农的研究成果,把信息论置于严谨的数学基础上,另一方面发展了纠错码的理论和应用。60年代,在此基础上进一步发展,建立了信源编码的失真率理论,研究了最优信号集,发明了卷积码的序列译码和维特比译码技术。70年代,卫星通信和计算机技术的迅速发展给信息论以新的动力。各种多用户通信模型的信息传输理论获得了迅速发展。信息论已经发展成为一门拥有众多分支的新兴学科。
信息论研究的基本问题之一是信息的度量。对于应用范围如此广泛的信息提出一个统一的度量是困难的。美国数学家C.E.香农在1948年提出信息熵作为信息量的测度。根据人们的实践经验,一个事件给予人们的信息量多少,与这一事件发生的概率(可能性)大小有关。一个小概率事件的发生,如“唐山发生七级以上大地震”使人们感到很意外和震惊,它给人们的信息量就很多。相反一个大概率事件的出现,如“12月15日北京未下雪”给人们的信息量就很少。因此,用

I (A) =-logP (A) IP


(A)表示事件A发生的概率来度量事件A给出的信息量,称为事件A的自信息量。若一次试验有M个可能结果(事件),或一个信源可能产生M个消息(事件),它们出现的概率分别用P1,P2……PM,则用H=-PilogPi来度量一次试验或一个消息所给出的平均信息量。当对数取2为底时,单位为比特,当对数取e为底时,则单位为奈特,H的表达式与熵的表达式差一个负号,故称负熵或信息熵。
信息论的意义和应用范围已超出通信的领域。自然界和社会中有许多现象和问题,如生物神经的感知系统、遗传信息的传递等,均与信息论中研究的信息传输和信息处理系统相类似。因此信息论的思想对许多学科如物理学、生物学、遗传学、控制论,计算机科学、数理统计学、语言学、心理学、教育学、经济管理、保密学研究等都有一定的影响和作用。另一方面,由于借助负熵定义的信息量只能反映符号出现的概率分布(不肯定性),不能反映信息的语义和语用层次。一篇重要的报告和一篇胡说乱道的文章可以具有同样的信息,这显然不符合常识。因此现阶段信息论的应用又有很大的局限性。把信息的质量推广到适合于语义信息和语用信息的情况,至今没有显著进展。
☚ 信息技术的内容   信息论美学 ☛
信息论

信息论

美国教学家申农于1948年创立的一门新科学。初期的信息论主要是应用数理统计方法,研究通讯和控制系统中,普遍存在的信息传递的共同规律,以及如何提高各种信息传输系统的有效性和可靠性问题。因而,也称为狭义信息论。
申农对狭义信息论的主要贡献是,给出了度量信息量的数学公式;初步解决了从信息接收端提取由信息源发来的信息的技术性问题;提出了如何充分利用信道的容量,以最大速率传递最大信息量的基本途径;初步解决了如何编、译代码使信源的信息被充分表达、信道容量被充分利用的问题;从理论上阐明了通讯的基本问题并提出了通讯系统的模型,如下图:


信源:信息的发送者,可以是机器、人以及自然界的物体等等。
编码:把信息变换成为可以传输的电、光、声等信号。
信道:传递信号的通路如电线、电缆、光纤维、空气……等等。
噪声:信号传送过程中,由外界混入或由系统内部产生的一些不能完全消除的干扰信号。
译码:把信号译成由语言所表达的有思想内容的信息。
信宿:信息的接收者,可以是人、机器系统,或其他物体。
50年代以后一些学者(如法国物理学家L·布里渊等)把信息论推广到物理学等其它领域。到了60年代人们已经把信息论划分成三个不同的类型,即初期的狭义信息论;一般信息论,将噪声理论,信号滤波与预测,调制等列入了研究范围;广义信息论,即包括前两种内容,也包括与信息有关的生理学、心理学、语义学等方面内容。
☚ 信息科学   信息 ☛

信息论

原称“通讯理论”,利用数学方法,研究信息的计量、传递、变换和储存的科学。1984年,美国数学家申农发表《通讯的数学理论》一文,确定了信息的质量——信息量及其计算公式,被认为是本学科诞生的标志。信息论的主要任务是要求通讯的高效率和可靠性,它原来主要用于电讯通信的编码和抗干扰等方面,由于信息的传递在社会的各行业,各部门都存在,因此,信息论也随社会实践需要而发展到各领域。信息论作为一门学科,通常包括对信息的量和质、语法和语义、传递和使用等方面的内容。在税务工作中,运用信息论知识,对于搞好税收管理具有重大意义,例如,如何在纷繁复杂的经济活动中捕捉到与税收相关的资料和信息,这些信息如何在不失真的前提下,以最快的速度,最有效和经济上最节省的途径进行传递等,都是与税务工作密切联系的环节。

信息论Information theory

是数据统计学和概率论的一个分支。它可以并已经应用于包括经济学在内的许多以统计分析为基础的领域。“熵”或 “平均信息量”(下称熵),是信息论中最重要的概念,是测度不确定性和无序的一种方法。20世纪60年代,亨利·希尔首次注意到了熵的概念,并推动了信息论在经济学领域中的应用。1967年希尔发展两种测度收入不平等程度的方法,发展了测定贸易和工业中的集中度和分散度的方法,以及其他方面的许多经济学应用方法。1972~1980年,希尔进一步讨论了信息论在经济理论和其他社会科学中深入应用问题。信息论的另一个稍有不同但同样重要的应用领域是经济计量学。信息判断可用于测定不同总体之间的分散度,有助于对不同假设进行统计区分、模型选择以及评价它们的预测能力,而这些是经济计量学中模型评价和推断过程的基本环节。1980年,希尔和莱汀南发展了所谓“最大熵” (ME) 分布理论,1984年希尔和费比格对这一论题进行全面的阐述。给定一个数据样本后 (可能情况下) 和某些试验前的信息,就能推导出连续过程的 “最大熵”分布,应用这一分布及其分位数和矩,可以解决包括小样本在内的许多重要问题。熵的更一般的概念以及相连的分散度的测定办法,可以用于构造收入不平等程度的一般化熵值(GE) 测度体系,还可应用于“多维”福利分析领域。连带的成果有两个: 一是所谓 “总和福利标志(研究)” 的发展。“总和福利标志”是几个混合指标,即收入、财富、生活的物质质量指标的综合指数。二是 “信息效率” 泛形式的发展(回归函数事先未知的条件下)。信息论在消费者及生产者需求方程的传统理论应用产生的一个直接概念是“价值份额”,即在一种给定商品上的支出与总支出之比。价值份额具有与概率相同的数学性质 (0

i<1)。

信息论

研究信息的计量、获取、传递、变换、存储、处理和利用的一门科学。信息论源于20世纪40年代末对通信问题的研究。主要创始人是美国数学家香农(Shannon,Claude Elwood,1916—2001)。信息量的度量称为“熵”。熵是对信息源中各种事件的不规则性或不确定性的度量。经济信息论是信息论的一般原理和方法在经济领域的应用,主要研究经济信息的计量、获取、传递、变换、存储、处理和利用。现代电子计算机和网络技术的发展,大大促进了信息论和经济信息论的发展。

信息论

信息论Information Theory

研究信息传输和信息一般规律的一门学科。信息是对客观世界现象通过直接观察或对讯号的语义解释领会而得到的知识。信息有着可以识别、可以转换、可以存贮复制和处理、传递等特性。
信息论运用数学方法研究信息和探索传递处理信息的一般问题。它摒弃了物质和能量的具体运动形式,把任何通讯和控制系统看做是信息的传递处理系统,把系统的有目的的运动抽象为信息变换过程。从这一角度来说,信息论是控制论的基础。
信息论有三方面内容:(1)狭义信息论,主要是以编码理论为基础研究信息系统模型、信息的度量和信息编码。(2)一般信息论,主要研究通讯问题,同时包括噪声理论,信号的检测和过滤等理论。(3)现代信息论,主要指应用电子计算机处理图像、语言、文字等信息,还包括管理信息与心理信息等方面。

☚ 控制论法   耗散结构论法 ☛
信息论

信息论xinxiluninformation theory

研究信息形态、本质及其运动规律的科学。有狭义信息论与广义信息论之分。狭义信息论是解决信息通信过程中的一系列理论问题,因此狭义信息论也称之为通信理论。广义信息论通常叫做信息科学,是研究生物、人类及电子计算机信息的运动规律的理论问题。从狭义信息论到广义信息论,研究范围则由通信工程领域扩展到人类认识世界和改造世界的整个活动领域。信息论与系统论、控制论一起,对于人类认识世界和改造世界具有方法论的重要意义。
美国科学家C·E·香农于1948年创立了狭义信息论,他在《贝尔系统技术》杂志上发表了奠基性的论文——“通信的数学原理” (A Math-ematical Theory of Communication)。香农运用数理统计的方法,探讨了信息的计量、传递、交换和储存,从多方面奠定了信息论的理论基础。另一位美国科学家N.维纳也从控制和通信的角度,独立提出了与香农相同的测量信息量的数学公式,还建立了维纳泸波理论和信号预测理论,也为信息论做出了贡献。信息论问世之后,不仅应用领域日益广泛,而且与其他科学相互影响和相互渗透,信息论在应用实践与向其他科学渗透的过程中,既帮助解决了许多客观世界问题,自身也吸取了营养,不断获得新的发展。信息论的基本内容:
❶信息的变换与传递;
❷信息的定量与度量;
❸分析识别信息的主要特征;
❹提供信息研究方法。信息研究方法,揭示了机器、生物体及社会的不同物质运动形态之间的共有的信息联系,从而为实现科学技术、生产、经营管理以及社会管理的现代化提供了手段,也同时为科学决策打下了坚实的基础。信息论是中国改革开放以来,研究和应用得较多的一门新兴学科。随着科学技术的飞速发展,信息革命、信息技术以及信息理论已深入到中国的各行各业的理论研究和工程实践之中,信息方法也已成为领导决策、组织管理、国民经济、社会生活以及军事活动的重要热点之一。世界各个国家都在探讨“信息时代”的含义与影响,并纷纷制定对策,以期跟上时代发展的步伐。

☚ 控制论   线性规划 ☛
信息论

信息论

是以通信工程为背景,以非决定论观点为指南,并用概率论和数理统计方法研究信息的计量、传递、变换和储存的一般规律的科学理论。1948年美国数学家仙农(Shannan,1916——)在《贝尔系统电话杂志》(Bell System TelephoneJournal,BSTJ)发表的著名长篇论文《通信的数学理论》,奠定了信息论的科学基础,仙农也由此被公认为信息论的创始人。信息论有狭义和广义之分,通常所说的信息论,就是指狭义信息论,也叫经典信息论、仙农信息论、概率信息论、语法信息论等;广义信息论是在狭义信息论基础上发展起来的;它被理解为利用狭义信息论观点来研究一切问题的理论,通常也把它称之为信息科学(见信息科学条)。信息论诞生后经历了三个发展时期:本世纪50年代,是信息论向各门学科冲击的时期,信息论的成就给许多学科带来了意外的希望;60年代,是信息论消化、理解的时期,研究的重点是信息和信源编码问题;70年代以来,是信息论向信息科学发展的时期。
信息论的主要贡献是:(一)创立了通信系统的模型,导出了概率性语法信息的度量公式。(二)建立了一些重要的性能界:信源的最大可能信息量;为了满足一定失真度要求必须传送的最小信息量;信道的最大可能通过能力(信道容量)。(三)建立了一组重要的编码定理,从理论上指明了为达到上述性能界应当遵循的信息处理方法和原则。从而既定性也定量地揭示了信息传递和处理的规律,使通信的研究从经验的阶段转变为科学。信息论的局限性在于它只研究信息的传递和相应的信息处理问题;它的信息概念只涉及形式方面的语法信息,不考虑内容和价值方面的语义、语用信息。
信息论在自然科学领域有广泛的应用,在社会领域内也有一定的运用价值和指导意义。如把信息概念引入新闻定义,把新闻定义为新近发生的对受众具有解除不确定性功能的事实的报道。把新闻信息量理解为具有新鲜度(出现概率小)的事实的集合等等。但一般认为运用仙农信息量公式不直接适用新闻信息的度量。

☚ 信息沟   信息工业 ☛
信息论

信息论

是研究信息的本质,并用数学方法研究信息计量、传递、变换和储存的一门学科。创始人是美国数学家香农。他在1948年发表的 《通信的数学理论》一文,从理论上阐明了信源、信宿、信道和编码等有关通信方面的一些基本问题,创立了通信系统的模型,建立了度量信息量的公式,初步解决了从信息接受端 (信宿) 提取由信息源发来的信息的技术问题和充分表达信源的信息及较好利用信道容量的编译问题。香农对信息的系统论述,标志着信息论已成为一门独立的学科。信息论创立以后,经历了50年代的创新时期、60年代的消化时期,现已进入了一个新的发展时期。信息论的主要研究内容是运用数学理论研究有关描述和度量信息的方法,探索传递、处理信息的基本原理。信息论认为,任何一个通信之所以需要,是因为接收端在收到信息之前,不知道发送的信息是什么,即接收端对发送的信息具有“不确定性”。当获得了信息之后,这种“不确定性”就可以减少或消除。信息量的大小用消除“不确定性”的多少来表示。在信息论中,采用“熵”这种量来刻划对象的不确定程度,用收到信息后熵的减少,来标志不确定性的减少,以此作为信息量的度量。
信息论一般分成三类:(1)狭义信息论。主要研究消息的信息量、信道容量以及消息的编码问题。(2)一般信息论。主要研究通信问题,同时包括噪声理论、信号滤波与预测、调制与信息处理问题。(3) 广义信息论。除前两类内容外,还包括所有与信息有关的领域,如心理学、管理信息等。近年来,我国理论工作者和实际工作者也积极开展对信息论的研究,并把信息论广泛用于各种不同的自然科学、社会科学以及技术领域。

☚ 系统论   控制论 ☛
信息论

信息论

揭示信息、本质和传输规律的科学理论,是研究信息的计量、发送、传递、交换、变换、接收和储存原理的一门新兴学科。其基本方法是近代数理统计方法。狭义的信息论是关于通讯技术的理论,它是以数学方法研究通讯技术中关于信息传输和变换规律的科学,主要代表是维纳的“微弱信号检测理论”和香农的“通讯的数学理论”。广义的信息论超出了通讯技术的范围来研究信息问题,它以各种系统、各门科学的信息为对象,广泛地研究信息的本质和特点,以及信息的取得、计量、传输、储存、处理、控制和利用的一般规律。广义信息论包括了狭义信息论,是狭义信息论在各个领域的应用和推广。广义信息论,亦称信息科学。信息论为控制论、自动化技术和现代通讯技术奠定了理论基础,为研究大脑结构、遗传密码、生命系统和神经病理现象开辟了新的途径,为管理的科学化和决策的科学化提供了思想武器。信息论的研究和发展,将进一步提高人类认识与利用自然的能力。

☚ 信源   信息法 ☛
信息论

信息论Information Theory

亦称信息科学。是由美国数学家申农创立的研究信息的产生、获取、转换、传递、存储、处理、识别、利用等的科学理论和方法。科学技术的发展和电子计算机的广泛应用,使得关于信息的理论和方法的研究占有日益重要的地位,有着非常广阔的发展前景。现在,信息已经成为一种基本的战略资源。有人认为,信息生产正成为一种主要的商品生产,信息部门已成为社会经济的第四产业。美国未来学家约翰·奈斯比特在《大趋势—改变我们生活的十个新方向》 (1982) 一书中认为,人类社会不可避免地将通过信息革命由工业社会进入信息社会。

☚ 控制论   发展经济学 ☛
信息论

信息论

研究信息的本质及其计量、传递、变换和存贮方法的学科。一般对信息论有三种理解:(1) 狭义信息论,主要研究消息的信息量,信道容量以及消息的编码问题。(2) 一般信息论,主要研究通信问题,包括噪声理论、信号滤波与预测、调制与信息处理等问题。(3) 广义信息论,不仅包括狭义信息论和一般信息论的内容,而且包括所有与信息有关的领域。一般认为,信息论的研究对象是厂义的信息传输和信息处理系统。信息的定义不下几十种,通常认为: 信息是反映客观世界中各种事物的特征和变化的组合,是一种有用的知识。信息是物质的普遍属性。在信息论中,建立了信息量公式,用概率函数对信息进行度量,信息是一种概率增加,信息量的大小用消除“不确定性”的多少表示。信息不仅具有有用性,共享性,时效性,而且还具有可识别性、可转换性、可传递性、可存贮性等特性。信息论中信息变换传递的基本模式是: 信源——编码——信道——译码——信宿。信息传输的效率取决于编码——译码的方式,信道容量以及噪声的干扰。信息论采用信息的方法处理各种系统,即用信息的概念作为分析和处理问题的基础,完全撇开对象的具体运动形态,把系统的有目的的运动抽象为信息变换的过程,进而从整体上研究系统运动的规律。信息论的创始人是美国数学家克劳德· 申农。1948年,申农发表了著名论文 《通信的数学理论》,1949年又发表了 《在噪声中的通信》一文。这两篇论文确立了现代信息理论的基础。此后,信息论逐步发展成为一门独立的边缘学科。现代信息论把对信息的定性研究推进到定量研究阶段,撇开了系统的具体物质形态,因而信息论的理论和方法可用来研究不同种类的系统,如技术系统、生物系统、社会系统、经济系统、管理系统等。

☚ 灰色系统   信息 ☛

信息论

informatics


信息论

informatics


信息论

information theory;theory of communication


信息论

information theory

信息论

信息论information theory

信息论原是由申农和维纳发展起来的通讯理论,主要是为解决通讯编码问题而提出的。信息论提出了对所获信息进行数值测量的方法。信息论的理论也被用于心理学、语言学、神经生理学和生理学等研究领域。按照信息论理论,通讯系统(当然这种模型也可用于其他非通讯系统)一般是由以下几部分组成:

信源在系统的发送端产生信息,信宿最后接受这种信息,信道是把信息从信源传递到信宿的物理介质。信源产生的信息一般不符合信道输入的要求,这就要在发送端通过编码来变换。同样,在接收端就要通过译码以符合接收要求。如果信息是取自离散随机变量集,这个信源就可称为离散信源。不是离散的信源就是连续信源。例如产生字母和数字的信源就是离散信源, 而产生言语和音乐的信源就是连续信源。一个信道的输出并不一定要和输入一致。如果信道的输出在已知输入信息时能够计算出来,那么这个信道就是无噪声的。如果有随机事件使得信道的输出变得不可预测,那么这个信道就是有噪声的。
☚ 新行为主义   行为 ☛
00000504
随便看

 

文网收录3541549条中英文词条,其功能与新华字典、现代汉语词典、牛津高阶英汉词典等各类中英文词典类似,基本涵盖了全部常用中英文字词句的读音、释义及用法,是语言学习和写作的有利工具。

 

Copyright © 2004-2024 Ctoth.com All Rights Reserved
京ICP备2021023879号 更新时间:2025/8/14 15:41:22