
spark
道友,且慢
不愤不启,不悱不发,学习就应该是问题驱动的。
微信: bclz_007
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
如何用SparkSQL 创建kudu的关联表
从kudu的官方文档中可以看到spark 如何集成kudu的。从文档中的demo可以看到,kudu表的创建只能调用NOSQL API 来实现,无法通过spark sql直接创建一张kudu表。spark sql查询kudu表也是先注册一张临时表后,才能用sql 语句查询的。 那么有没有方法在spark sql上直接提交一个Create DDL语句来创建一张关联kudu的表呢? 答案是:可以,通过...原创 2020-01-17 12:16:00 · 1652 阅读 · 0 评论 -
Spark基本操作----持续更新中
打开spark shell 进入到spark目录 打开 Python 版本的 Spark shell bin/pyspark 打开 Scala版本的 Spark shell bin/spark-shell 退出shell 按 Ctrl-D spark 用户页面的地址 http://[ipaddress]:4040 Spark Context 的创建 SparkConf conf = new S...原创 2019-12-21 15:16:49 · 277 阅读 · 0 评论