雷雨中的双桅船

运行SQL时出了个错：SQL： INSERT OVERWRITE DIRECTORY 'result/testConsole' select count(1) from nutable; 错误信息：Failed with exception Unable to rename: hdfs://indigo:8020/tmp/hive-root/hive_2013-08-22_

10个节点的Hadoop集群在使用mahout做大量的数据分析一段时间后，开始报如下错误：[2015-12-31 10:07:31,440] [INFO ] pool-5-thread-3 SparseVectorsFromSequenceFiles - Maximum n-gram size is: 1[2015-12-31 10:07:31,440] [INFO ] pool-5-thr

今天在项目中使用mahout的过程中，遇到了这个异常：[14:43:13.059] [2015-11-24 14:43:13,058] [INFO ] resin-port-8080-23 AbstractJob - Command line arguments: {--charset=[UTF-8], --chunkSize=[64], --endPhase=[2147483647], --

http://www.cnblogs.com/sharpxiajun/archive/2013/06/03/3114560.html　　在上篇文章里，我列举了一个简单的hive操作实例，创建了一张表test，并且向这张表加载了数据，这些操作和关系数据库操作类似，我们常把hive和关系数据库进行比较，也正是因为hive很多知识点和关系数据库类似。　　关系数据库里有表（table），分区，hi

1.内置运算符1.1关系运算符运算符类型说明A = B所有原始类型如果A与B相等,返回TRUE,否则返回FALSEA == B无失败，因为无效的语法。 SQL使用”=”，不使用”==”。A 所有原始类型如果A不等于B返回TRUE,否则返回FALSE。如果A或B值为”NULL”，结果返回”NULL”。

1. 在hive 中建表：create table if not exists dim_api ( id    tinyint  comment  'apiid', api   string   comment  'api name')ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE ; 注意最后一

创建表hive> CREATE TABLE pokes (foo INT, bar STRING); 创建表并创建索引字段dshive> CREATE TABLE invites (foo INT, bar STRING) PARTITIONED BY (ds STRING); 显示所有表hive> SHOW TABLES;按正条件（正则表达式）显示

hive文件存储格式包括以下几类：1、TEXTFILE2、SEQUENCEFILE3、RCFILE4、ORCFILE(0.11以后出现)其中TEXTFILE为默认格式，建表时不指定默认为这个格式，导入数据时会直接把数据文件拷贝到hdfs上不进行处理；SEQUENCEFILE，RCFILE，ORCFILE格式的表不能直接从本地文件导入数据，数据要先导入到textfile格式的

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask;Hive在执行insert o

1. 下载mahout0.11  （在apache官网下载或用git下载）git clone https://github.com/apache/mahout.git2. 解压进入目录，因为我的hadoop环境版本为2.6.0所以使用以下语句编译：mvn clean package -Dhadoop2 -Dhadoop2.version=2.6.0 -DskipTests=true