hive
关注
分享
扫一扫
a11a2233445566
活泼
展开
-
hive安装配置
1.上传hive安装包2.解压3.配置Hive(在一台机器上即可)mv hive-env.sh.template hive-env.sh4.运行hive发现内置默认的metastore存在问题（1.换执行路径后，原来的表不存在了。2.只能有一个用户访问同一个表）5.配置mysql的metastore5.1上传两个mysql的rpm包rpm -原创 2015-03-19 15:19:46 · 430 阅读 · 0 评论 -
hive transform脚本书写问题
问题描述：集群环境发生变化，原来Python版本2.7，在其上写的udf.py（用Python写的udf），如下运行正常：ADD FILE /home/users/…../readlines.py;select transform(shw) using 'python readlines.py' as (shw bigin原创 2017-01-19 15:48:30 · 686 阅读 · 0 评论 -
NBA篮球运动员大数据分析决策支持系统
package com.dt.spark.sparksqlimport org.apache.hadoop.conf.Configurationimport org.apache.hadoop.fs.{FileSystem, Path}import org.apache.spark.SparkConfimport org.apache.spark.sql.SparkSess原创 2017-02-09 22:43:51 · 7055 阅读 · 0 评论 -
hive启动报错问题
Hive启动时报错：如图 原因：我们用的hive里jline-2.12.jar版本与hadoop的版本不一致所致。将hadoop里的jline jar包换成hive里的就可以解决了。 Hive里jline-2.12.jar 所在目录：HIVE_HOME/libHadoop 里jline jar包所在的目录（3个）：1、HADOOP_HOME/share/hadoop/原创 2017-01-23 16:54:40 · 929 阅读 · 2 评论