hadoop记录

一、HADOOP
./hadoop fs -mkdir book 新建一个目录；
./hadoop fs -ls 查看文件目录；
./hadoop fs -copyFromLocal 系统目录（eg:D:\\test.txt） 目标文件名称（默认存放在当前用户下/user/用户/目标文件名称）；
./hadoop fs -ls file:/// 当期根目录下的文件列表；
./hadoop fs -ls hdfs://localhost:8888/user 查看分布式文件列表，端口由core-site.xml文件中fs.default.name的值决定；

二、HIVE
新建外部表：
hive> create EXTERNAL table hive_test(num int,name string)
> ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' //指定每行字段值之间风格符
> STORED AS TEXTFIL //以文本形式存储
> LOCATION '/user/terran/text'; //指定HDFS路径

启动hiveserver服务：
进入bin目录，$./hive --service hiveserver ,类似的服务还有cli(命令行接口，默认)，hwi（hive的web接口），jar(与hadoopjar等价的Hive接口)，metastore(使metastore作为一个单独（远程）进程运行)，hiveserver是让hive以提供thrift服务的服务器形式运行，允许用不同语言编写的客户端进行访问。