
数据采集
文章平均质量分 93
数据采集相关知识
落叶飘雪2014
一个慢慢的学习者
展开
-
浅析数据采集工具Flume
Flume 是一个分布式、可靠、高可用的海量日志聚合系统,支持在系统中定制各类数据发送方,用于收集数据,同时,Flume 提供对数据的简单处理,并写到各种数据接收方的能力。原创 2022-11-27 20:00:00 · 1218 阅读 · 0 评论 -
浅析数据迁移工具Sqoop
sqoop 是 apache 旗下一款“Hadoop 和关系数据库服务器之间传送数据”的工具。导入(Import)数据:MySQL,Oracle 导入数据到 Hadoop 的 HDFS、HIVE、HBASE 等数据存储系统。导出(Export)数据:从 Hadoop 的文件系统中导出数据到关系数据库 MySQL等。Sqoop 的本质还是一个命令行工具。原创 2022-11-27 21:00:00 · 739 阅读 · 0 评论