
深度学习阅读笔记
hyl-ocean
github.com/hyl11
展开
-
深度学习之基础-线性代数
第二章 线性代数 2.4 线性相关 书里面给的现行相关的例子不是很明了,百科给出的现行相关定义 设α₁,α₂,…,αₑ(e≥1)是域P上线性空间V中的有限个向量.若V中向量α可以表示为:α=k₁α₁+k₂α₂+…+kₑαₑ(kₑ∈P,e=1,2,…,s),则称α是向量组α₁,α₂,…,αₑ的一个线性组合,亦称α可由向量组α₁,α₂,…,αₑ线性表示或线性表出. 给出的实例如下: 定义矢量为[2 4...原创 2019-05-11 15:39:50 · 217 阅读 · 0 评论 -
深度学习之基础-概率和信息论
第三章 概率和信息论 3.13 信息论 量化信息需要满足的性质: 非常可能发生的事件信息量要比较少,并且极端情况下,确保能够发生的事件 应该没有信息量。 较不可能发生的事件具有更高的信息量。 独立事件应具有增量的信息。例如,投掷的硬币两次正面朝上传递的信息量, 应该是投掷一次硬币正面朝上的信息量的两倍。 自信息: I(x)=−logP(x) I(x) = -log P(x) I(x...原创 2019-05-11 20:13:12 · 289 阅读 · 0 评论