
MechineLearning
Elek_43
探索技术,热心交流
展开
-
Entropy
先出结论:信息熵:编码方案完美时,最短平均编码长度的是多少。交叉熵:编码方案不一定完美时(由于对概率分布的估计不一定正确),平均编码长度的是多少。相对熵:编码方案不一定完美时,平均编码长度相对于最小值的增加值。 平均编码长度 = 最短平均编码长度 + 一个增量 1: 熵熵的本质是香农信息量...原创 2017-12-23 16:03:03 · 579 阅读 · 0 评论 -
KNN 简单现实
knn是什么,大家可以百度百科一下,这里就不做介绍,其作为机器学习的最基本的算法,这里有简单的实现。# -*- coding: utf-8 -*-"""Created on Sat Jun 9 18:27:11 2018@author: Qunxing"""import numpy as npDEBUG_FLAG = 0 #1 表示调试标志def Normalize_...原创 2018-06-10 16:07:52 · 200 阅读 · 0 评论