什么是狭义、一般、广义信息论

信息论是运用概率论与数理统计的方法研究信息熵、通信系统、数据传输、密码学、数据压缩等问题的应用数学学科。其核心问题是信息传输的有效性和可靠性以及两者间的关系。它主要是研究通信和控制系统中普遍存在的信息传递的共同规律以及研究最佳解决信息的获取、度量、变换、存储和传输等问题的基础理论。信息论将信息的传递作为一种统计现象来考虑,给出了估算通信信道容量的方法。

信息论作为一门科学理论,发源于通信工程。它的研究范围极为广阔,一般把信息论分成以下三种不同类型。

(1)狭义信息论

狭义信息论主要总结了香农的研究成果,因此又称为香农信息论。在信息可以度量的基础上,研究如何有效、可靠地传递信息。狭义信息论研究的是收、发端联合优化的问题,而重点在各种编码。它是通信中客观存在的问题的理论提升。

(2)一般信息论

一般信息论研究从广义的通信引出的基础理论问题、香农信息论和维纳的微弱信号检测理论等。微弱信号检测又称最佳接收,是为了确保信息传输的可靠性,研究如何从噪声和干扰中接收信道传输的信号的理论。除此之外,一般信息论的研究还包括:噪声理论、信号滤波与预测、统计检测与估计理论、调制理论、信号处理与信号设计理论等。它总结了香农和维纳以及其他学者的研究成果,是广义通信中客观存在的问题的理论提升。

(3)广义信息论

无论是狭义信息论还是一般信息论,讨论的都是客观问题。然而当讨论信息的作用、价值等问题时,必然涉及主观因素。广义信息论研究包括所有与信息有关的领域,如心理学、遗传学、神经生理学、语言学、社会学等。因此,有人对信息论的研究内容进行了重新界定,提出从应用性、实效性、意义性或者从语法、语义、语用方面来研究信息,分别与事件出现的概率、含义及作用有关,其中意义性、语义、语用主要研究信息的意义和对信息的理解,即信息所涉及的主观因素。

广义信息论从人们对信息特征的理解出发,从客观和主观两个方面全面地研究信息的度量、获取、传输、存储、加工处理、利用等,理论上说是最全面的信息理论,但由于主观因素过于复杂,很多问题本身及其解释尚无定论,或者受到人类知识水平的限制目前还得不到合理的解释,因此广义信息论目前还处于正在发展的阶段。

版权声明:本篇文章(包括图片)来自网络,由程序自动采集,著作权(版权)归原作者所有,如有侵权联系我们删除,联系方式(QQ:452038415)。http://www.apmygs.com/2109.html
返回顶部