Fai_te-优快云博客

原创 hive sql 即hql行转列和列转行经典例子，无需自建数据

SELECT table1.id , concat_ws('|',collect_list(table1.max_or_min_part)) as max_and_min_partfrom ( SELECT tab1.id as id , if(tab2.min_part = tab1.col2,concat('min_part=',tab1.order_id),concat('max_part='...

2020-06-18 14:35:05 264

原创 hive每次启动报错

错误类型：FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient解决方法：在...

2019-05-27 23:41:51 246

原创 linux安装lynx报错：No curses header-files found

报错：configure: error: No curses header-files found解决方法：yum install ncursesyum install ncurses-devel

2019-04-29 19:09:05 1226

转载 Hadoop全分布搭建

本地模式的配置参数文件配置参数参考值 hadoop-env.sh JAVA_HOME /root/training/jdk1.8.0_144 伪分布模式的配置参数文件配置参数参考值 h...

2018-07-25 21:17:17 360

转载 Hadoop全分布集群搭建（2）——SSH免密码登陆

Hadoop全分布集群搭建SSH免密码登陆为所有节点设立用户hadoop Master节点免密登录生成并上传公钥 Mster与Slave节点之间免密登录 Hadoop全分布集群搭建——SSH免密码登陆紧接着上篇讲，设置完主机名和域名解析之后，hadoop需要通过ssh登陆到各个节点操作，一般情况下，我们为了安全，不会直接用root身份进行hadoop环境搭建，因此设...

2018-07-19 17:15:01 439

转载 Hadoop全分布集群搭建（1）——设置主机名与域名解析

Hadoop全分布集群搭建设置主机名与域名解析 1各个节点主机名修改 2 设置各个节点的域名解析 Hadoop全分布集群搭建——设置主机名与域名解析1.1各个节点主机名修改为了方便起见，一般我们需要修改各节点的主机名hostName，这样有助于我们区别该节点电脑的身份。默认安装后所有节点的系统内hostName都是localhost.localdomain。我们将各节点的H...

2018-07-19 17:14:17 2213

转载 Hadoop环境的搭建

一、安装： 1、解压到用户指定目录 : tar -zxvf hadoop-2.4.1.tar.gz -C /root/training/ 2、设置环境变量： vi ~/.bash_profile HADOOP_HOME=/root/training/hadoop-2.4.1 export HADOOP_HOME PATH...

2018-07-16 15:54:36 197

转载解决 Unable to load native-hadoop library for your platform

安装hadoop启动之后总有警告：Unable to load native-hadoop library for your platform... using builtin-java classes where applicable原因：Apache提供的hadoop本地库是32位的，而在64位的服务器上就会有问题，因此需要自己编译64位的版本。1、首先找到对应自己hadoop版本的64位的l...

2018-07-15 01:18:42 539

转载 javafx treeview 获取选中的结点

int dex=foldertree.getSelectionModel().getSelectedIndex(); 获取选中的结点下标 foldertree.getSelectionModel().selectedItemProperty().addListener( new ChangeListe...

2018-05-09 11:22:50 1837

Fai_te的博客