HDFS
充了1块钱
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
maven jar包的手动下载
1、 按 HDFS - 客户端配置 同样的方法配置一个pom.xml文件,配置上需要下载的jar包信息例如<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apache.org/xsd/ma..原创 2020-12-16 00:50:50 · 351 阅读 · 0 评论 -
HDFS - 客户端配置
1、安装Maven(安装在非中文的目录),并配置环境变量;2、配置Maven本地库路径和镜像库(maven根目录下的conf\settings.xml文件),这里配的是阿里的maven库(https://maven.aliyun.com/mvn/guide)maven库路径配置:默认的路径是在用户目录下的.m2/repository文件夹,这里可以配置自己存储路径阿里云镜像配置(可以不配):可以从阿里云maven库直接复制配置信息到文件中3、eclips上的配置window -原创 2020-12-16 00:31:31 · 457 阅读 · 0 评论 -
HDFS - 初识
1、HDFS优劣势优势高容错性数据自动保存多个副本。它通过增加副本的形式,提高容错性。某一个副本丢失以后,它可以自动恢复,这是由 HDFS 内部机制实现的。适合批处理它是通过移动计算而不是移动数据。它会把数据位置暴露给计算框架。适合大数据处理处理数据达到 GB、TB、甚至PB级别的数据。能够处理百万规模以上的文件数量,数量相当之大。能够处理10K节点的规模。流式文件访问一次写入,多次读取。文件一旦写入不能修改,只能追加。它能保证数据的一致性。可构建在廉价机原创 2020-12-12 13:20:36 · 146 阅读 · 0 评论
分享