从这一章开始,我们从有效而可靠地传输信息的观点出发,对组成信息传输系统的各个部分分别进行讨论。
本章首先讨论信源,重点是信源的统计特性和数学模型,以及各类离散信源的信息测度——熵及其性质。这部分内容是香农信息论的基础。
信源的描述与分类
信源的分类方法依信源特性而定,一般按照信源发出的消息在时间上和幅度上的分布情况,把信源分为:
连续信源:发出在时间上和幅度上都是连续分布的连续消息的信源;
离散信源:发出在时间上和幅度上都是离散分布的信源。
离散信源又可以细分为:
离散无记忆信源:所发出的各个符号之间是相互独立的,即发出的符号序列中的各个符号之间没有统计关联性,各个符号的出现概率是它自身的先验概率。
离散有记忆信源:发出的各个符号之间不是相互独立的,即各个符号出现的概率是有关联的。也可以根据信源发出一个消息所用符号的多少,将离散信源分为:
发出单个符号的离散信源:信源每次只发出一个符号代表一个消息;
发出符号序列的离散信源:信源每次发出一组含二个以上符号的符号序列代表一个消息。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
全部0条评论
快来发表一下你的评论吧 !