信息论day5：信源编码的核心问题；等长编码；不等长编码

由定义式可以知道，
信源编码的核心问题：
信源的熵H(S)

信息速率R_b

其中，R_S是符号速率，单位是(符号/s)或者是(Baud)

信源编码的主要问题：
信源的符号数L、概率场{S_i}已知，如何选择划分的符号数J，使得Jlog₂L≤n₁log₂D，即位数n₁ 满足

然后n₁log₂D尽可能小，来提高编码效率η_C=H(S)/n₁log₂D？

解决方法：

（1）均匀编码（等长编码）：

将原本“信源的符号数为L，每J个符号一组来编码”产生的序列集数目L