- 博客(8)
- 收藏
- 关注
RSS订阅原创 hadoop三大组件的常用命令
Hadoop的三大组件——HDFS（Hadoop Distributed File System）、YARN（Yet Another Resource Negotiator）、MapReduce，各自拥有一系列常用的命令行工具，用于管理和操作Hadoop集群。
2025-03-17 17:34:37
397
原创 hadoop三大模块学习和相关配置（hdfs、mapreduce、yarn）
包括登录root用户、修改IP和主机名、配置ssh免密登录、关闭防火墙、安装JDK、解压Hadoop安装包（该部分配置暂时未做记录，可以网上自行查找）例如：我的配置是：（总共三台服务器分别是： node1 node2 node3），node1为中心服务器，我是通过vmware虚拟机进行的操作，在window本地c盘下找到了hosts（C:\Windows\System32\drivers\etc） 把ip配置进去了。其余配置均为linux集群上的配置，可以上网搜索，都容易理解。HDFS的配置文件主要包括。
2025-03-17 17:18:33
952
原创 hadoop基础学习
定义：Hadoop是一个由Apache基金会所开发的分布式系统基础架构，主要解决海量数据的存储和海量数据的分析计算问题。Hadoop是开源的、可靠的、可拓展的，非常适于存储大型数据（比如TB和PB），并且提高资源在集群中的利用率及执行效率。产生背景：Hadoop的产生受到了谷歌两篇论文的启发，分别是GFS（Google File System）和MapReduce。优势高可靠性：Hadoop底层维护多个数据副本，所以即使Hadoop某个计算元素或存储出现故障，也不会导致数据的丢失。高扩展性。
2025-03-12 09:06:00
586
原创 解决问题：MySQL ERROR:Access denied for user `root`@`ip` (using password:YES)
解决问题：MySQL ERROR:Access denied for user `root`@`ip` (using password:YES)
2025-03-10 14:56:35
437
原创 js事件循环机制总结
异步代码：先放入宿主环境（浏览器、Node），不必原地等待结果，并且不会阻塞主线程继续向下执行，异步结果会在将来的某个时刻执行。js是单线程的处理机制，单线程一个时间只能执行一件事，为了针对这一情况，出现了同步和异步。同步代码：立即放入js引擎（js主线程）来执行，并且原地等待结果。为了知道其执行过程，需要知道代码中哪些是同步代码那些是异步代码。以上代码：1和3是同步 2是异步。
2024-01-19 11:23:20
523
原创 区别转发和重定向（redirect forward）
一个例子了解转发重定向情况一：张三和李四是好朋友，一天，张三没钱了去找李四借钱，但是李四说：“我也没钱了，但是我有个好朋友王五，我去帮你借钱”，于是，李四去找王五借钱了。情况二：仍然是张三找李四借钱，但是李四说，我给你个地址你去找这个地址的人去借钱，于是李四把王五的地址给了张三，让张三去找王五。解释：第一种情况是转发，第二种情况是重定向。本质区别是：转发是一次请求，因为张三只找了李四一个人。重定向是两次请求，张三先找了李四，李四又给个地址让张三去找了王五，这里张三找了李四和王五，算是两次请求。
2022-04-04 10:16:45
445
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人