- 博客(6)
- 收藏
- 关注
RSS订阅原创 大数据开发面试笔记（一）-HDFS
HDFS核心机制与优化摘要： 架构设计：NameNode管理元数据（内存+FsImage/edits），DataNode存储数据块，SecondaryNameNode定期合并元数据文件解决单点问题 读写特性：写流程串行化（管道传输），读流程并行化（就近读取）；Block存储机制减少磁盘寻址 常见问题：小文件危害（内存/计算资源浪费）可通过合并/HAR归档解决；脑裂问题通过ZK隔离机制处理 辅助机制：安全模式（启动时只读状态）；压缩框架（Gzip/Bzip2/LZO/Snappy）各有适用场景 恢复机制：Se
2025-09-19 19:15:26
685
原创 大数据开发-离线数据仓库（持续继续完善中......）
数据仓库是什么？数据仓库一个为数据分析而设计的企业级数据管理。维度模型：所谓维度就是分析数据的角度，维度模型将复杂的业务通过事实和维度两个概念进行呈现。事实通常对应业务工程，维度通常对应业务过程发生所处的环境。
2025-09-19 16:26:59
1327
原创 编写.bat文件批处理启动Redis的两个.exe文件
（3）双击bat文件后，Redis出现如下图表明启动成功。这样不用没在命令窗口输入两个exe文件，直接双击我们编写的.bat文件便可以启动Redis。编写.bat文件批处理两个.exe文件，启动Rdeis只需双击.bat文件便可启动Redis。(2) 右击编辑，编写如图内容，路径改为自己的，保存。(1) 桌面新建文本文件，把后缀名改为.bat。
2024-06-26 10:17:12
978
原创 解决：[ERROR] Failed to execute goal on project sky-server: Could not resolve dependencies for project
install: 完成项目编译、单元测试、打包功能、同时将打好可执行jar包（war包或其它形式的包）布署到本地maven仓库，未布署到远程maven私服仓库。clean：清楚之前的编译文件（target文件）先双击：clean，再双击：install。
2024-06-22 11:01:00
2726
8
原创 Git下载、安装、在IDEA中配置Git-简洁快速版
.........................................直到出现这个界面，安装成功.....................................
2024-06-14 19:44:41
1281
原创 解决：numpy.core._exceptions._ArrayMemoryError: Unable to allocate 1.40 GiB for an array with shape (16
电脑内存不足，系统内存使用过高。
2024-06-13 20:25:32
1594
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人