qq_32021523的博客

原创 安卓客户端与开发端connect

开发端import javax.servlet.ServletException;import javax.servlet.http.HttpServlet;import javax.servlet.http.HttpServletRequest;import javax.servlet.http.HttpServletResponse;import java.io.IOExcepti...

原创 spark kmeans java实现

package zqr.com;import org.apache.spark.Accumulator;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaRDD;import org.apache.spark...

原创 kmeans算法java实现

package zqr.com;import breeze.collection.mutable.ArrayLike;import java.io.*;import java.util.ArrayList;import java.util.List;import java.util.Random;public class KmeansFect {private static...

原创 jietu

原创 spark ML ALS实现电影推荐

package zqr.com;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import o...

原创 ALS算法推荐

package zqr.com;import breeze.optimize.linear.LinearProgram;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaRDD;import org.a...

原创 spark mllib ALS电影推荐

package zqr.com;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import ...

原创 spark广播,累加器

累加器import org.apache.spark.Accumulator;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.api.

原创 protobuf使用linux

描述了以下protobuf的概念和使用

原创 hadoop hbase hive搭建运行所遇到的问题

这是我遇到的三个比较棘手的问题,其实也不是什么大问题,但是又很致命,共勉

原创 Hbase之filter

import java.io.IOException;import java.util.ArrayList;import java.util.List;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.

原创 Spark之join

import org.apache.spark.HashPartitioner;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.sto

原创 Spark之分区

import org.apache.spark.Partitioner;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.sql.SparkSession;import scala.Tuple2;import java

原创 Spark之combineByKey详解Java

import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.ap

原创 KNN（NearestNeighbor）临近算法，自然语言讲解

主要是讲了一些算法的主要思想，一个大致的应用方向，就没细说了，可结合网上的一些资料看看

原创 windows下安装scrapy

scrapy这个东西，是很好的一个开源框架，搭建稍许复杂，踩坑才能填坑嘛，哈哈

原创 hive搭建以及使用与简介（这里就介绍最简单的嵌入式了）

hive查询不到hdfs中的数据

原创 zookeeper在linux下搭建+kafka+Spark Streaing(sparkstreaming就下篇介绍了)

zookeeper安装ZooKeeper的安装模式分为三种，分别为：单机模式（stand-alone）、集群模式和集群伪分布模式。ZooKeeper 单机模式的安装相对比较简单，如果第一次接触ZooKeeper的话，建议安装ZooKeeper单机模式或者集群伪分布模式。这里就先介绍单机安装模式1.先从zk官网上下载稳定版本，这里我下载的是 zk.3.4.8官网地址：ht

原创 Socket+SparkStreaing+Redis操作代码

Socket+SparkStreaing+Redis操作代码

原创 关于spark streaming新版本ssc创建不了问题

spark streaming创建ssc问题

原创 linux下eclipse (ee版)配置tomcat搭建javaweb框架

1.下载jdk1.82.下载eclipseeclipse版本为4.4.1注：前面两个步骤就不详细说了，具体步骤可参考给力星的博客，有详细介绍3.下载tomcat下载的版本为tomcat.8.5.14解压到/usr/local/tomcat目录下用root权限去修改端口号，当然，因为我这里8080端口号呗mapreduce占用就换了一个80端口cd conf

原创 redis在linux下搭建

linux下搭建redis完整版