
大数据
饬殇07
标准的IT码农
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
hiveJdbc ha 链接报错
java hive execute org.apache.hadoop.hive.ql.exec.mr.MapRedTask 安装的是hive2 然后java执行hive 直接select* from table 没有问题 但是带有mr的会包这个错, 然后beeline连接执行查看是版本问题换成 1.2.就ok了 org.apache.hive.jdbc.ZooKeep原创 2016-12-06 11:27:48 · 7855 阅读 · 1 评论 -
spark关联hdfs
在spark-shell中使用var rdd = sc.textFile("hdfs://yuncluster/aqi.data"); 来加载hdfs文件(其中yuncluster是集群名称) 在使用rdd.count()的时候一直报错识别不了集群名称 使用绝对路径就可以 hdfs://ip:port/aqi.data (高可用 不想写死主机) 后来使用 hdfs:/aqi.dat原创 2016-12-09 15:22:29 · 1184 阅读 · 0 评论 -
Hadoop 添加删除Slave
Hadoop 添加删除Slave@(Hadoop)在hdfs-site.xml文件中添加如下配置:<property> <name>dfs.hosts</name> <value>/root/jiangyuande/hadoop/etc/hadoop/datanode-allow.list</value> </property> <property> <name>dfs.hosts.exclude<转载 2016-12-26 11:25:45 · 905 阅读 · 0 评论