sparkGraphx
关注
分享
扫一扫
阿龙学堂
砖搬的多了，就自然知道怎样省力了
展开
-
阿龙学堂-SparkGraphx基本操作篇-第四篇
0、需求：图的基本操作实现1、加载依赖包略2、代码基本操作 def main(args: Array[String]): Unit = { //准备环境 val conf: SparkConf = new SparkConf().setAppName("test").setMaster("local[4]") val sc = new SparkCon...原创 2020-03-16 16:22:24 · 247 阅读 · 0 评论 -
SparkGraphx基本操作篇-第三篇
0、需求sparkGraphx实现PageRank1、添加依赖<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"...原创 2020-03-16 16:25:36 · 447 阅读 · 0 评论 -
阿龙学堂-SparkGraphx基本操作篇-第二篇
0、需求加载外部文件进行图计算，数据存在于该外部文件当中。1、加载依赖包<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-insta...原创 2020-03-16 16:11:54 · 276 阅读 · 0 评论 -
阿龙学堂-SparkGraphx基本操作篇-第一篇
0、需求实现我们要构建一个由 GraphX 项目上的各种协作者组成的属性图。vertex 属性可能包含用户名和职业。我们可以使用描述协作者之间关系的字符串来注释边：1、加载已有测试数据1.1、加载依赖<?xml version="1.0" encoding="UTF-8"?><project xmlns="http://maven.apache.org/P...原创 2020-03-16 15:59:28 · 412 阅读 · 0 评论