- 博客(4)
- 收藏
- 关注
原创 sqoop 脚本
bin/sqoop list-databases --connect jdbc:mysql://localhost:3306/ --username root --password hadoop ##导入mysql表数据到HDFS bin/sqoop import \ --connect jdbc:mysql://node-1:3306/userdb \ --username root \ --p...
2019-09-25 13:11:41
2224
原创 sqoop的中文乱码处理
中文测试 mysql导入到hdfs bin/sqoop import \ --connect jdbc:mysql://node03:3306/A \ --username root \ --password 123456 \ --target-dir /A2 \ --table B --m 1 mysql导入到hive bin/sqoop import \ --connect "j...
2019-09-25 13:04:48
763
原创 离线sqoop
离线sqoop sqoop hadoop hive flume 01- Sqoop–软件介绍 sqoop专门用来做RDBMS数据和Hadoop数据相互迁移的一个工具。 Apache Sqoop 是在 Hadoop 生态体系和 RDBMS 体系之间传送数据的一种工具。来自于 Apache 软件基金会提供。sqoop.apache.org Sqoop 工作机制是将导入或导出命令翻译成 ...
2019-09-25 13:02:49
286
原创 Apache Flume
Apache Flume 一、 目录 二、 Apache Flume 3 1. 概述 3 2. 运行机制 4 3. Flume采集系统结构图 5 3.1. 简单结构 5 3.2. 复杂结构 5 三、 Flume安装部署 6 四、 Flume简单案例 8 1. 采集目录到HDFS 8 2. 采集文件到HDFS 9 五、 Flume的load-balance、failover 13 六、 Flume拦...
2019-09-25 12:54:11
202
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅