登录
source /opt/client/bigdata_env
kinit admin
或者kinit user1
修改hosts文件
内容如下:
192.168.171.71 hw003
192.168.171.61 hw002
idea相关配置
在com.huawei.bigdata.hdfs.examples.HdfsExample
类中有实例代码,修改变量PRNCIPAL_NAME
为当前集群的用户名,同时将文件user.keytab
拷贝到conf
文件夹中。
在导入FusionInsight_Cluster_1_HDFS_Client\FusionInsight_Cluster_1_HDFS_ClientConfig\HDFS\hdfs-example-security
项目时,如果遇到相关的jar包导入不进来,需要在目录中进行寻找,并导入。
hive
- 使用客户端
beeline
- 创建数据表:
create table sales (transactionId int, customerId int, itemId int, amountPaid double) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE tblproperties("skip.header.line.count"="1") ;
- 从hdfs中导入数据到这个数据表中:
load data inpath '/tmp/ddy/sales.csv' into table sales;
- 查看数据表内容:
select * from sales;
- 查看到刚才创建的数据库:
hdfs dfs -ls /user/hive/warehouse/ddy_hive.db
- 查看刚才的导入的数据表: