Bluenapa的博客

交叉熵损失函数（Cross Entropy loss function）,主要为了度量两个概率之间的差异性。信息香农（shannon）曰：信息是用来消除随机不确定性的。“太阳从东边升起”，这条信息并没有减少不确定性，因为太阳肯定是从东边升起的，这是一句废话，信息量为0。”2018年中国队成功进入世界杯“，从直觉上来看，这句话具有很大的信息量。因为中国队进入世界杯的不确定性因素很大，而...

1804年12月10日，卡尔·雅可比（Carl Gustav Jacob Jacobi）出生于普鲁士的一个殷实犹太人家庭，成为家中的老二，父亲（Simon Jacobi）是一位成功的银行家。雅可比是个聪明的孩子，幼年跟随舅舅学习古典语言和数学，12岁进入波茨坦大学预科学习，不到半年跳级到高年级，甚至在自学欧拉的《无穷小分析引论》后尝试解决五次方程式。当时的大学并不接受16岁以下的学生，因此雅可...

目录前言內积（点积）Dot Product; Scalar Product;inner Product外积（叉积） Exterior Product张量积 Outer Product前言有三维向量 tips：根据输入输出的情况可以分辨三种积。內积（点积）Dot Product; Scalar Product;inner Pr...

千尺之台，起于垒土。——老子。前言先给出statistics中的垒土（直观理解）。均值mean标准差 standard deviation(平)方差 variance协方差表示标准差和variance 描述一维随机变量的散布度，仿照variance的定义，得到协方差 covariancecovariance 表示两个随机变量的...

目录导言一元线性回归模型参数估计（最小二乘法）最小二乘法c++实现导言监督学习中，预测的变量是离散的，则称分类 otherwise 连续的变量称回归。回归中只包含一个自变量和因变量，二者为线性关系，则为一元线性模型。如果自变量大于等于两个，则为多元（线性模型）。一元线性回归模型总体回归函数中Y与X的关系可是线性的，也可是非线性...

目录前言一 .特征值分解（EVD-eigen value decomposition）定义回顾二 .奇异值分解（SVD-singular value decomposition）定义求解三 例子和应用e.g.eigen代码实现四 压缩比率 compress ration拓展：PCA前言EVD分解要求 被分解矩阵 是实对称矩阵SVD对被...

1.理解变分法，要先了解泛函（functional）函数是 数到数 的映射泛函是 函数到数 的映射，自变量是函数，变量是一个实数。泛函记为或者 2.有了泛函，再来引出泛函的极值（extremum）泛函的极值是在 容许函数类 中求得使泛函达到极值的函数。（貌似是一句废话） 容许函数类的解释：在某一个特定的问题中不是所有的函数都能做自变量，例如最短弧长的...

               先说差分和微分              自变量x的差分就是微分  即：                                           Δx=dx               因变量y的差分是函数y的变化量  即                                             Δy=y(x+Δx)-...

作为一个工科的学生,我们长期以来会使用比如像是矩阵以及行列式这些在线性代数上的知识,在这篇文章中,我想来聊一聊这些问题,即设么事面积,以及什么事面积的高纬度的推广.1:什么是面积?对于什么是面积,大家可能首先就会想到我们生活中常用的长*宽么?真的是这样么,其实在这里我们所谈论的面积,其实是欧几里得空间几何面积的基本的单位:平行四边形的面积.关于平行四边形的面积的定义,几何上所说的就是相邻两...