信息论
信息论是研究信息的本质,并用数学方法研究信息的计量、传递、变换和存储的一门学科。
我们所说的信息究竟指什么呢?显然,我们不只是在谈论"事实"或"真相"(如果有什么人在一种特定情况下确信这种真相的话)。我们所指的并不仅仅是新闻或指导或我们在百科全书中找到的那种资料。我们使用这个词时所指的意思,与香农和韦纳在他们撰写有关信息理论和控制论的文章时使用这个词所指的含义没有多大的不同,他们的意思是:凡是在一种情况下能减少不确定性的任何事物都叫做信息。这个观点已经影响了那些对物理学和工程学所知甚少并且从未看过信息论公式的学者的思想。
还有一种说法:所谓信息,是事物存在的方式或运动状态,以及这种方式或状态的直接或间接的表述。信息不是事物本身,而是表征事物。 关于信息,有以下几个要点 信息是人类赖以生存和发展的三大资源之一。 人类认识和实践的过程,实际是采集、传送、再生和利用信息的过程。
信息和信号不同,信号是传送信息的载体。同一信息内容可用不同形式的载体(如光、电、声信号)传送出去。
从通信的角度可定义“信息意味着熵的减少”。通信的结果是减少或消除事物的不确定性。 |