计算该离散信息源中每个符号所含的平均信息量。
计算该离散信息源中每个符号所含的平均信息量。
【正确答案】:此信息源中每字符平均信息量为:
【题目解析】:Shannon熵公式: H(p1,p2,...,pn)是信息员发出消息的信息量。因为 - log(pi)是状态i出现时的信息量,所以H(p1,p2,...,pn)实际上为各状态信息的平均信息量(数学期望)。根据Shannon熵公式计算平均信息量。
Top