Peasmaster的博客

环境说明：1、虚拟机为VM102、Linux系统为centos6.53、Hadoop为hadoop-2.6.0-cdh5.7.04、JDK为jdk-8u45-linux-x64.gz5、Maven为apache-maven-3.3.9-bin.zip6、MySQL为MySQL-Linux-5.6【以上环境必须提前装备好】7、hive-1.1.0-cdh5.7.0Hive

创建数据库CREATE (DATABASE|SCHEMA) [IF NOT EXISTS] database_name [COMMENT database_comment] [LOCATION hdfs_path] [WITH DBPROPERTIES (property_name=property_value, ...)];--案例 create database ...

压缩优点省空间网络传输快降低IO压缩缺点CPU负载增加如果不支持分割，并行度低常用压缩名称code压缩压缩时间解压时间是否支持分割Snappyorg.apache.hadoop.io.compress.SnappyCodec49.96%6.4119.84否gziporg.apache.hadoop.io.compress.Gzi...

配置hive.auto.convert.join0.11版本之后默认是true。hive.mapjoin.smalltable.filesize/hive.smalltable.filesizemap join通常用于一个很小的表和一个大表进行join的场景，具体小表有多小，由参数 hive.mapjoin.smalltable.filesize来决定，该参数表示小表的总大小，默认值为2...

报错信息如下：Required field ‘client_protocol’ is unset! Struct:TOpenSessionReq(client_protocol:null, configuration:{use:database=defalut})排查：版本号不对，输入beeline后发现版本号中有spark字样[root@hadoop001 lib]# beelineBe...

报错信息如下：java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries.java.lang.IllegalArgumentException: Error while instantiating ‘org.apache.spark.sql.hive.HiveSes...