
Spark
重启试试..
喜欢钻研大数据、python、机器学习、人工智能...
展开
-
hbase常用命令
创建表创建库 https://www.cnblogs.com/caiba/p/10986029.html https://www.baidu.com/link?url=79iInv5hH6jklIMoliofWz3eeWZ4T3Seut57X3YLXHoBUBFOs59JI8TFpFCIP_9m2sAWyYy2rrXZFzFAxMDGKa&wd=&eqid=c74ab0bf0006e93e000000025f0678b9 https://blog.youkuaiyun.com/wuliu_fo原创 2020-07-09 10:03:08 · 1141 阅读 · 0 评论 -
kafka常用的命令
查看有那些topic 进入到 bin目录 1.查看topic ./kafka-topics.sh --zookeeper node3:2181,node4:2181,node5:2181 --list 2.创建topic ./kafka topics.sh --topic new_top --partitions 3 zookeeper node3:2181,node4:2181,nod...原创 2020-02-26 16:22:24 · 386 阅读 · 0 评论 -
Spark资源结论
1.只要提交 applicton master 不管状态如何 都会接着跑 Task 因为 任务是在 work节点上跑到 如果不指定 excutor 的核心数 和内存 默认是会使用 集群的所有资源 2.那样的话 如果同时有两个 applicton应用程序 那么 第二个会等第一个执行完后 Excutor 才会执行第二个 applicton *****(重点)Spark 是 pipelline ...原创 2020-01-07 16:36:41 · 152 阅读 · 0 评论