大数据爱好者

1.数据的大小数据量最小的基本单位是 bit，按顺序给出所有单位：bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB1 Byte =8 bit 1 KB = 1,024 Bytes = 8192 bit 1 MB = 1,024 KB = 1,048,576 Bytes （普通用户数据级别） 1 GB = 1,024 MB = 1,048,576 ...

一，集群的初步使用1.Hadoop 集群启动DFS 集群启动：sbin/start-dfs.shDFS 集群关闭：sbin/stop-dfs.shYARN 集群启动：sbin/start-yarn.shYARN 集群启动：sbin/stop-yarn.sh2.HDFS 初步使用查看集群文件：hadoop fs -ls /上传文件：hadoop fs -p...

一，HDFS 前言HDFS：Hadoop Distributed File System Hadoop 分布式文件系统，主要用来解决海量数据的存储问题1、 设计思想分而治之：将大文件，大批量文件，分布式的存放于大量服务器上。以便于采取分而治之的方式对海量数据进行运算分析要把存入进HDFS集群的所有的数据要尽量均匀的分散在整个集群中如果有100G 的数据①集群有100个节...

hadoop fs === hdfs dfshadoop namenode -formathdfs namenode -formathdfs dfsadmin -printTology查看hdfs 的机架信息hdfs dfsadmin report查看整个集群相关信息的报告（各个信息是心跳机制发送过来的）hdfs dfsadmin -safemode get查...

HDFS 的 的 Java API 操作hdfs 在生产应用中主要是客户端的开发，其核心步骤是从 hdfs 提供的 api 中构造一个 HDFS的访问客户端对象，然后通过该客户端对象操作（增删改查）HDFS 上的文件一、用 利用 eclipse 查看 hdfs 集群的文件信息1、 下载一个 eclipse 开发工具 eclipse-jee-luna-SR1-win32-x86...