
spark
文武书生
这个作者很懒,什么都没留下…
展开
-
No current assignment for partition 解决
我用sparkstream连接的kafka,手动提交偏移量,保存到zk中, 我的分区2 消费到保存到zk中是351了,但是kafka中偏移量被人修改为起止就是352.,所以消费不到,报了个这个错误.原创 2020-09-02 16:18:52 · 4397 阅读 · 2 评论 -
sparklisten和sparkstreamlisten 和 监控spark任务 error 的处理方法 强无敌
https://blog.youkuaiyun.com/u013939918/article/details/107579884?utm_medium=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-1.channel_param&depth_1-utm_source=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-1.chann原创 2020-08-25 14:18:00 · 219 阅读 · 0 评论 -
yarnui 和 sparkui的总结 和配置
https://developer.aliyun.com/article/706215 https://www.cnblogs.com/30go/p/9911492.html原创 2020-08-17 16:23:39 · 426 阅读 · 0 评论 -
spark:spark-submit 提交任务及参数说明(yarn)
https://blog.youkuaiyun.com/weixin_38750084/article/details/104146054?utm_source=app转载 2020-07-28 10:48:23 · 793 阅读 · 0 评论 -
sparkstream读取本地文件进行测试
https://blog.youkuaiyun.com/qq_41854897/article/details/88542629 大神的文章 亲测有用转载 2020-07-23 11:28:53 · 626 阅读 · 0 评论 -
sparkui的用法
https://blog.youkuaiyun.com/zxl55/article/details/79572475转载 2020-06-22 18:42:47 · 230 阅读 · 0 评论 -
SparkSql中常用的函数
https://blog.youkuaiyun.com/liam08/article/details/79663018 函数大全 https://www.cnblogs.com/yahutiaotiao/p/12631807.html https://www.cnblogs.com/songjiaying/p/6558841.html原创 2020-05-29 14:11:35 · 564 阅读 · 0 评论 -
spark提交任务的几种方式
https://www.cnblogs.com/itboys/p/9998666.html转载 2020-05-25 11:13:06 · 342 阅读 · 0 评论 -
spark-submit提交参数设置
https://www.cnblogs.com/gnool/p/5643595.html转载 2020-03-24 14:57:19 · 322 阅读 · 0 评论