Jamson

Spark基于ALS推荐算法实现商品推荐实战Demo(Java版/Scala版)一、数据集准备1,1,51,2,3.51,4,1.21,6,02,1,4.52,2,3.62,3,4.93,3,5.03,4,2.03,5,5.03,6,1.94,2,3.34,5,4.64,6,05,2,2.55,3,4.25,4,3.7二、代码部分Java版本ALSRe...

Spark基于LogisticRegression逻辑回归实现英文垃圾邮件分类（Java版/Scala版）中英文邮件分词有所不同，若需要中文垃圾邮件分类请移步我上一篇博客Spark基于NaiveBayes朴素贝叶斯算法实现中文垃圾邮件分类实战（Java / Scala）此次测试的数据集大概格式如下：spam You'll not rcv any more msgs from the chat...

Spark基于NaiveBayes朴素贝叶斯算法实现中文垃圾邮件分类实战（Java + Scala）网上很少能找到Spark millib系列算法对纯中文垃圾邮件分类的demo，此Demo做了Java + Scala的混合调用，若迫切需要Java版本的可私信，有时间的时候我会写一个纯Java版本的。主要分为以下几个过程：一、数据集下载数据集来源于网络，具体地址我忘记了，所以分享在网盘，自...

spark NaiveBayes朴素贝叶斯分类算法入门demo(Java版/Scala版)一、Java版BayesJava.javapackage top.it1002.spark.ml;import org.apache.spark.SparkConf;import org.apache.spark.SparkContext;import org.apache.spark.ap...

spark Logistic回归算法入门demo(Java版/Scala版)一、Java版LogisticRegressionWithSGDJava.javapackage top.it1002.spark.ml;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import o...

Spark KMeans算法入门Demo（Java版/Scala版）一、Java版本KmeansJavaDemo.javapackage top.it1002.spark.ml;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api...

SparkSQL随机DataFrame/DataSet数据源query查询用户数据（Java版/Scala版）SparkSQL入门小demo，主要操作是构造DataFrame/Dataset，以及通过它们去执行Sql一、以下为Java版本的DemoJava版本（DataSourceJava.java、App.java）DataSourceJava.javapackage top.it10...

Spark系列之Scala/Java版Streaming-netcat-WordCount一、引入maven依赖：<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:x

Spark系列之Scala版WordCount该教程思路与我之前写的Java版本WordCount思路一样，但是对比起来，Scala的代码简洁很多，毕竟Spark是Scala语言写出来，而Scala又是Java的再封装化的脚本语言，所以自然会节省很多代码，具体还有很多知识点，需要我们慢慢去学习还是直接上代码，有不足的地方望谅解主要写了两种词频形式package top.it1002.s...

Spark系列之Java版WordCount这几天开始入门spark，代码方面写的不好望谅解本来想用java的lambda表达式写简略一点的，但是初期也不是很懂，慢慢改进package top.it1002.scala.wordcount;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPai...