storm
关注
分享
扫一扫
_bukesiyi
专注教育行业的技术从业者，致力于推动大数据和人工智能技术在教学与研究中的应用和创新。拥有丰富的实践经验和技术积累，擅长将复杂技术内容转化为易于理解的教程和项目实例，帮助更多人掌握前沿科技。深耕 Hadoop、机器学习、3D 计算机视觉等方向，期待在 优快云 与技术同仁共同成长、分享实践心得和行业见解。
展开
-
storm+kafka的实战
分为本地模式如果是本地的话可以直接将代码运行起来如果是在集群上跑的话，最好将打了包的jar传上来，这样可以防止一些没有的jar包上面本身就有。需要注意的是 provide是将包不打进来 compile是默认的打包方式，是将包都打进来storm jar wxaStormwordcount-1.0.jar cn.itcast.storm.kafkaAndStor...原创 2018-05-10 17:36:19 · 718 阅读 · 0 评论 -
storm学习之一
配置storm.yaml(文件如下配置） storm.zookeeper.servers: - "hadoop01" - "hadoop02"nimbus.host: "hadoop01"nimbus.childopts: "-Xmx1024m"ui.port: 8080ui.childopts: "-Xmx768m"supervisor.childopts: "-Xmx768m&q原创 2018-05-05 16:45:04 · 197 阅读 · 0 评论 -
storm学习之二
storm流程分析Storm组件本地目录树上面的work中的pids下面有很多的进程，其中第一个进程是work的进程号。其余的进程是由work所起的进程Storm zookeeper目录树原创 2018-05-05 19:05:47 · 153 阅读 · 0 评论 -
storm学习之三
1、集群如何启动，任务如何执行？ java -server nimubs，supervisor client--->createTopology(序列化)--->提交jar到nimbuinbox--->nimbus分配任务(task总数/worker数)---写到zk。 启动worker<------识别自己的任务<----supervisor---...原创 2018-05-05 21:07:57 · 186 阅读 · 0 评论 -
storm学习之四
原创 2018-05-06 21:04:47 · 123 阅读 · 0 评论 -
kafka 和storm Java api编程中 pom文件范例
要注意的是运行的时候可能会遇到日志文件jar包重复的情况，这里要用到<exclusions>排除如下 <exclusion> <groupId>org.slf4j</groupId> <artifactId>slf4j-log4j12</artifact...原创 2018-05-07 17:03:56 · 846 阅读 · 0 评论