qq_36201400的博客

正则化（Regularization）机器学习中几乎都可以看到损失函数后面会添加一个额外项，常用的额外项一般有两种，一般英文称作ℓ1​-norm和ℓ2​-norm，中文称作L1正则化和L2正则化，或者L1范数和L2范数。 L0范数是指向量中非0的元素的个数。 L1范数是指向量中各...

交叉熵（cross entropy）是深度学习中常用的一个概念，一般用来求目标与预测值之间的差距。信息量:首先是信息量。假设我们听到了两件事，分别如下：事件A：巴西队进入了2025世界杯决赛圈。事件B：中国队进入了2025世界杯决赛圈。仅凭直觉来说，显而易见事件B的信息量比事件A的信息量要大。究其原因，是因为事件A发生的概率很大，事件B发生的概率很小。所以当越不可能的事件发生了，我们获取到的信息量就越大。越可能发生的事件发生了，我们获取到的信息量就越小。那么信息量应该和事件发生的概率有关。

硬件环境：Windows 7 旗舰版软件环境：Miniconda3首先：打开Anaconda Prompt（Miniconda3），输入"conda env list" 显示所有环境其次：输入"conda create -n tensorflow1.13_gpu python=3.6" 回车其次：输入"conda activate ...

查看本机显卡驱动版本 右击"桌面"------单击"NVIDIA控制面板"-----进去即可以查看显卡驱动版本 在安装CUDA时，需要与本机显卡驱动版本进行匹配，否则会出错 具体可以见https://docs.nvidia.com/cuda/cuda-toolkit-release-notes/index.html...