让每一行代码都有改变世界的力量

需要数据源可以留言object DecisionTreeClassification { def main(args: Array[String]): Unit = { System.setProperty("hadoop.home.dir","E:\\tools\\hadoop\\hadoop-common-2.6.0-bin-master\\hadoop-common-2.6.0-bin-master") val spark = SparkSession.builder().mas

需要数据源可以留言object logic { def main(args: Array[String]): Unit = { val conf = new SparkConf().setMaster("local[*]").setAppName("linner") val spark = SparkSession.builder().config(conf).getOrCreate() val file = spark.read.format("csv").option(

需要数据集可以给我留言object linner { def main(args: Array[String]): Unit = { val conf = new SparkConf().setMaster("local[*]").setAppName("linner") val spark = SparkSession.builder().config(conf).getOrCreate() val file = spark.read.format("csv").opti

判断婚姻状况需要数据集的可以给我留言object DecisionTreeClass { def main(args: Array[String]): Unit = { val sc = new SparkContext("local[*]", "AdultData") val raw_data = sc.textFile("adult.data") val data = raw_data.map(line => line.split(", ")).filter(f

object DecisionTree { def main(args: Array[String]): Unit = { val conf = new SparkConf().setMaster("local").setAppName("tree") val sc = SparkSession.builder().config(conf).getOrCreate() val lines = sc.sparkContext.textFile("tree.txt") va

1. 安装jdk1.82.下载http://h2o-release.s3.amazonaws.com/h2o/rel-turchin/9/index.html3.解压 运行cd ~/Downloadsunzip h2o-3.8.2.9.zipcd h2o-3.8.2.9java -jar h2o.jar4.访问http://localhost:543215.运行官方 GBM_Example下载导入importFiles ["http://s3.amazonaws.com/h

1.Hadoop集群HA搭建可参考我的文章《Hadoop分布式搭建（一）》2.修改环境变量cd /opt/hadoop-3.1.2/etc/hadoopvi hadoop-env.shexport JAVA_HOME=/usr/lib/jvm/jdk1.8.0_111export HDFS_NAMENODE_USER=rootexport HDFS_DATANODE_USER=rootexport HDFS_JOURNALNODE_USER=rootexport HDFS_ZKFC_U

1.准备三台机器 centos7安装步骤 略（ 可以看我的 虚拟机安装 centos7 文章）2.配置免秘钥访问略（可以看我的免秘钥配置文章）3.JKD 安装1.8略4.Hadoop官网下载3.1.2网址 http://hadoop.apache.org/https://archive.apache.org/dist/hadoop/common/hadoop-3.1.2/5.解压 tar -zxvf hadoop-3.1.2.tar.gz mv hadoop-3.1.2 /opt/t

1.准备三台机器 centos7安装步骤 略（ 可以看我的 虚拟机安装 centos7 文章）2.配置免秘钥访问略（可以看我的免秘钥配置文章）3.JKD 安装1.8略4.下载 HBasehttps://hbase.apache.org/downloads.html5.安装tar -zxvf hbase-2.2.5-bin.tar.gzmv hbase-2.2.5 /opt/hbase/6.修改环境变量cd /opt/hbase/hbase-2.2.5/conf/vi hbase

1.准备三台机器centos7安装步骤 略（ 可以看我的 虚拟机安装 centos7 文章）2.配置免秘钥访问略（可以看我的免秘钥配置文章）3.下载zookeperhttps://zookeeper.apache.org/releases.html下载 zookeeper-3.4.5.tar.gz4.安装解压tar -zxvf zookeeper-3.4.5.tar.gz mkdir -p /opt/zkmv zookeeper-3.4.5 /opt/zk/接入目录编辑cd

服务器相互免秘钥访问生成秘钥 ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa修改配置文件vi /etc/ssh/ssh_config StrictHostKeyChecking noUserKnownHostsFile /dev/null互相copy秘钥ssh-copy-id -i ~/.ssh/id_rsa.pub root@IP完成...

1.Hadoop官网下载3.1.2网址 http://hadoop.apache.org/https://archive.apache.org/dist/hadoop/common/hadoop-3.1.2/2.准备三台机器(本教程使用的虚拟机)centos 7 安装教程可以看我的这篇https://redis.blog.youkuaiyun.com/article/details/113755340ssh免密登陆配置略3.安装JDK1.8略4.安装hadoop-3.1.2.tar.gz把下