spark
关注
分享
扫一扫
文章平均质量分 95
JokerDuuuu
这个作者很懒，什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
spark-aggregate与treeAggregate的理解
spark-mllib中许多算法用到了treeAggregate这个方法，使用该方法而不是aggregate方法能够提升算法的性能。比如mllib中的GaussianMixture模型可以提升20%的性能，见treeAggregate此前对这种聚合方式不是很了解，因此这里记录一下。1. 一个例子def main(args: Array[String]): Unit = {原创 2018-01-14 16:41:13 · 5273 阅读 · 0 评论 -
Spark-mllib源码分析之逻辑回归(Logistic Regression)
一个例子类关系图创建用LBFGS求解LR的类运行模型模型优化1 损失与梯度的计算2 LR目标函数梯度计算3 LR正则项计算及梯度更新模型预测总结1. 一个例子// 0. LogisticRegressionWithLBFGSExample#main()def main(args: Array[String]): Unit = { val c原创 2018-01-20 16:34:09 · 3979 阅读 · 2 评论