
日记,技术
pete1223
这个作者很懒,什么都没留下…
展开
-
xgboost 解释
注:红色箭头指向的l即为损失函数;红色方框为正则项,包括L1、L2;红色圆圈为常数项。xgboost利用泰勒展开三项,做一个近似,我们可以很清晰地看到,最终的目标函数只依赖于每个数据点的在误差函数上的一阶导数和二阶导数。函数中的变量是y^2\hat{y} ^2,将ft(xi)f_t(x_i)看成△x,所以原始就可以化成如下所示 gig_i由于是一次导,所以需要对L函数中的y^2\hat{y} ^2求转载 2017-11-16 21:19:53 · 502 阅读 · 0 评论 -
20180423-hdfs
### 1.[volatile和synchronized的区别与联系](#1)### 2.[hdfs](#2)### 3.[yarn](#3)### 4.[乐观锁和悲观锁](#4)<span id="1" style="font-size: 20px;">```1. volatile本质是在告诉jvm当前变量在寄存器(工作内存)中的值是不确定的,需要从主存中读取;synchronize...转载 2018-04-24 14:49:22 · 193 阅读 · 0 评论 -
FSImage CheckPoint
什么时候进行checkpoint 什么时候进行checkpoint由两个参数dfs.namenode.checkpoint.preiod(默认值是3600,即1小时)和dfs.namenode.checkpoint.txns(默认值是1000000)来决定。period参数表示,经过1小时就进行一次checkpoint,txns参数表示,hdfs经过100万次操作后就要进行checkpoint了...转载 2018-12-05 12:48:33 · 326 阅读 · 0 评论