- 博客(5)
- 收藏
- 关注
RSS订阅原创 实时流数据处理（Flink）
启动股票生成器和kafka生产者和Flink本地测试 程序查看结果。在Apache Flink Web Dashboard上传jar包。Task Managers为2或者更小，程序运行不起来。拉取镜像并安装（包括重新启动kafka集群）Parallelism小于3，程序运行不起来。查看docker desktop数据。Flink案例-数据接入、处理。本次实验就此结束啦，再会^-^
2025-11-09 23:13:34
221
原创 Hadoop集群DataNode启动失败解决实录
查看DataNode日志，得到slave1 节点的 DataNode 尝试连接 NameNode（master/192.168.128.140:8020）但最终退出，未成功注册到集群。在 slave1 节点执行启动 DataNode 的命令时，系统提示 hadoop-daemon.sh: command not found，说明系统无法找到该脚本。多方检查发现应该是DataNode中有错误日志影响重新启动集群，备份好数据后清空日志。发现集群容量等数据均为 0，说明 HDFS 无可用 DataNode。
2025-11-09 23:04:46
346
原创 【真】使用 Storm 集群实现综合数据流处理（实验四 综合数据流处理）
本文详细介绍了在Windows环境下使用IDEA和DockerDesktop搭建分布式数据处理系统的实验过程。实验首先部署了包含Zookeeper、Kafka和Storm的集群环境，通过docker-compose配置实现了三节点集群的搭建。然后开发了基于Storm的数据处理拓扑结构，包括Kafka生产者(WriteTopology)、数据源(DataSourceSpout2)以及处理Bolt(SplitBolt和StatAndStoreBolt)，实现了股票交易数据的采集、处理和存储功能。实验最后通过St
2025-11-07 01:08:26
1492
原创 Linux安装以及初步使用docker遇到的问题以及解决方案
本文分享了在CentOS系统中使用Docker时遇到的几个常见问题及解决方法：1）为普通用户添加sudo权限；2）配置Docker国内镜像源；3）解决用户无法访问Docker守护进程的问题；4）处理镜像拉取失败的情况。操作步骤包括使用visudo添加用户权限、配置registry-mirrors、将用户加入docker组等。当阿里云镜像拉取失败时，直接使用默认源成功拉取了tomcat镜像。文章提供了具体命令和解决方案参考，适合Docker初学者参考。
2025-10-13 21:46:27
405
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人