- 博客(4)
- 收藏
- 关注
原创 DAY TWO
每个文件的数据块大小和副本系数都是可配置的。hadoop 当中, 文件的 block 块大小默认是 128M(134217728字节),剩下的不足128M的自成一块。可以用于存储在Hadoop集群中的HDFS文件数据集进行数据整理、特殊查询和分析处理。hive作为数据仓库软件,使用类SQL的HiveQL语言实现数据查询,所有Hive数据均存储在Hadoop文件系统中。它将每个文件存储成一系列的数据块,这个数据块 被称为block,除了最后一个,所有的数据块都是同样大小的。
2024-04-23 21:55:58
244
原创 DAY ONE
单机模式, 1个机器上运行HDFS的NameNode和DataNode、YARN的 ResourceManger和NodeManager,主要用于学 习和调试。该模式可以形象的比喻为:一个餐厅的厨房有三个人,一个人买菜、一个人切菜、一个人炒菜,效率提高了!该模式可以形象的比喻为:一个餐厅的厨房只有一个人,这个人既要买菜、又要切菜、还要炒菜,效率很低!NameNode:集群当中的主节点,主要用于管理集群当中的各种数据。DataNode:集群当中的从节点,主要用于存储集群当中的各种数据。Hadoop框架内容。
2024-04-22 23:37:02
399
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅