18、连续随机变量的信息度量与统计推断

连续随机变量的信息度量与统计推断

1. 离散随机变量的信息度量回顾

在探讨连续随机变量的信息度量之前，我们先回顾一下离散随机变量的相关概念。假设有三个随机变量 (X)、(Y) 和 (Z)，它们的联合概率分布如下：

((x, y))	((0, 0))	((1, 0))	((0, 1))	((1, 1))
(p(x, y))	0	1/2	1/2	0

((y, z))	((0, 0))	((1, 0))	((0, 1))	((1, 1))
(p(y, z))	1/2	0	0	1/2

((x, z))	((0, 0))