
采集工具
文章平均质量分 96
大数据采集工具相关内容
浅谈_
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
数据采集工具Sqoop
Sqoop是一种用于在Hadoop和结构化数据存储(如关系数据库)之间高效传输批量数据的工具。Sqoop官网提供了Sqoop1和Sqoop2,Sqoop1只是一个普通的应用程序,通过给定参数就可以运行该程序。Sqoop2拥有服务端的应用程序,简单的功能变得复杂化,但是更加统一化、规范化。原创 2021-06-24 00:47:09 · 1401 阅读 · 1 评论 -
实时数据流采集工具Flume
Flume是一个实时数据流采集框架,是一种分布式的、高可用的服务,可以有效的收集、聚合和移动大量的日志数据。将数据源的数据变成数据流,将数据采集到目标位置中。本质上就是一个数据迁移的过程。官网文档地址。原创 2021-06-22 00:55:58 · 7099 阅读 · 0 评论