
hive
盒马coding
这个作者很懒,什么都没留下…
展开
-
hive权限控制介绍
1.hive权限控制需要配置那个配置文件?2.Hive授权的核心是什么?3.如何实现 角色的授权和撤销?Hive从0.10版本(包含0.10版本)以后可以通过元数据来控制权限,Hive-0.10之前的版本对权限的控制主要是通过Linux的用户和用户组来控制,不能对Hive表的CREATE、SELECT、DROP等操作进行控制,当然Hive基于元数据来控制权限也不是完全安全的,目原创 2016-09-09 21:30:37 · 4183 阅读 · 0 评论 -
hive常用操作
转载地址:https://github.com/DingHe/PerfAnalysis/blob/master/hive/HIVE.txtbeeline -u jdbc:hive2:// !connect jdbc:hive2://cloud011:100004、HIVEQL:Data Definationcreate database if not exi转载 2017-12-01 16:58:37 · 4581 阅读 · 0 评论 -
hive 基础笔记
字符集乱码(将LC_ALL=c修改):localeunset LC_ALL参数内部调用用hiveconf,外部调用用hivevar,hivevar内部调用会报错;!!必须有几个分区就对几个分区(包括源文件分区)进行范围限定,否则系统自己给补足从而导致在hadoop上保存为另外一份文件,由于文件不相同所以导致overwrite=intohive原创 2017-09-17 22:18:26 · 1043 阅读 · 0 评论 -
hive-redis运行Log日志
[root@hadoop1 testData]# sh hive-redis.sh > /opt/testData/hive-redis.log 2>&1 &rmr: DEPRECATED: Please use 'rm -r' instead.17/04/23 10:55:07 INFO fs.TrashPolicyDefault: Namenode trash configu原创 2017-04-23 11:10:38 · 2185 阅读 · 0 评论 -
hive 错误总结
hive> create table userName(id int,name string);FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:For direct MetaStore DB connections, we don'原创 2017-03-30 22:41:56 · 517 阅读 · 0 评论 -
Bulkload 导数据的详细日志
[root@hadoop1 testData]# HADOOP_CLASSPATH=`hbase classpath` hadoop jar /opt/hbase-1.2.1/lib/hbase-server-1.2.1.jar completebulkload "/tmpbulkdata/sp_addr_data" sp_address_bulkloadSLF4J: Class path原创 2017-04-04 15:35:57 · 1460 阅读 · 0 评论 -
importtsv 详细的执行日志
[root@hadoop1 testData]# HADOOP_CLASSPATH=`hbase classpath` hadoop jar /opt/hbase-1.2.1/lib/hbase-server-1.2.1.jar importtsv -Dimporttsv.columns=HBASE_ROW_KEY,sp_address:ID,sp_address:PLACE_CODE,sp_ad原创 2017-04-04 15:10:21 · 918 阅读 · 1 评论 -
如何用Hive 往HBase里面插入大量的数据
当我们用HBase 存储实时数据的时候, 如果要做一些数据分析方面的操作, 就比较困难了, 要写MapReduce Job。 Hive 主要是用来做数据分析的数据仓库,支持标准SQL 查询, 做数据分析很是方便,于是便很自然地想到用Hive来载入HBase的数据做分析, 但是很奇怪地是, 上网查了一下, 只看到以下两种情况:1. 如何用Hive 往HBase里面插入大量的数据。2.转载 2017-03-30 21:58:12 · 6538 阅读 · 2 评论 -
Hive与HBase整合
Hive HBase IntegrationHive HBase IntegrationAvro Data Stored in HBase ColumnsIntroductionStorage HandlersUsageColumn MappingMultiple Columns and FamiliesHive MAP to HBase C转载 2017-03-30 18:15:30 · 1642 阅读 · 0 评论 -
Hive 优化参数
HIVE优化参数hive> set;_hive.hdfs.session.path=/tmp/hive/root/bd4f450f-2f3f-460d-8539-5ee573701e59_hive.local.session.path=/tmp/root/bd4f450f-2f3f-460d-8539-5ee573701e59_hive.tmp_table_space=/t原创 2017-03-13 21:49:21 · 14144 阅读 · 3 评论 -
hive 配置参数说明
hive.exec.mode.local.auto 决定 Hive 是否应该自动地根据输入文件大小,在本地运行(在GateWay运行) true hive.exec.mode.local.auto.inputbytes.max 如果 hive.exec.mode.local.auto 为 true,当输入文件大小小于此阈值时可以自动在本地模式运行,默转载 2017-03-11 15:03:40 · 1572 阅读 · 0 评论 -
SQL函数类型及函数使用大全
转载地址:http://www.cnblogs.com/moss_tan_jun/archive/2010/08/23/1806861.html一旦成功地从表中检索出数据,就需要进一步操纵这些数据,以获得有用或有意义的结果。这些要求包括:执行计算与数学运算、转换数据、解析数值、组合值和聚合一个范围内的值等。下表给出了T-SQL函数的类别和描述。函数类别作用聚合函数执行的操作是将多个值合并为一个值。...转载 2018-04-26 10:03:53 · 2895 阅读 · 0 评论