我爱奔跑的浮云_的博客

介绍 Flume NG是Cloudera提供的一个分布式、可靠、可用的系统，它能够将不同数据源的海量日志数据进行高效收集、聚合、移动，最后存储到一个中心化数据存储系统中。由原来的Flume OG到现在的Flume NG，进行了架构重构，并且现在NG版本完全不兼容原来的OG版本。经过架构重构后，Flume NG更像是一个轻量的小工具，非常简单，容易适应各种方式日志收集，并支持failover和负载...

hive 建表语法 内部表： create table fzname (id int,name string,age int,tel string) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE; 外部表： create external table fz_external_name(id int,...

一、简介 Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具，可以将一个关系型数据库（例如 ： MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据导进到关系型数据库中。Sqoop专为大数据批量传输设计，能够分割数据集并创建Hadoop任务来处理每个区块。 把MySQL、Oracle等数据库中的数据导入到HDFS...

MYSQL 到 HBASE bin/sqoop import --connect jdbc:mysql://192.168.66.4:3306/networkmanagement \ --username sendi \ --password 1234 \ --table alarm_result \ --hbase-table sqoop_test \ --column-f...

MYSQL 数据导入到 HDFS sqoop import --connect jdbc:mysql://192.168.66.4:3306/networkmanagement \ --username sendi \ --password 1234 \ --table people \ --columns "name,age" \ --where "age>18" \ --targ...