
大数据
大数据相关知识
zhangjpb
这个作者很懒,什么都没留下…
展开
-
RESTful API 设计规范
一 URL设计 动词+宾语 动词的覆盖 宾语必须是名词 复数 URL 避免多级 URL 二、状态码 状态码必须精确 2XX状态码 3xx 状态码 4xx 状态码 5xx 状态码 三、服务器回应 不要返回纯本...原创 2020-04-15 13:04:42 · 147 阅读 · 0 评论 -
消息中间件 pulsar
https://blog.youkuaiyun.com/liyiming2017/article/details/82875068原创 2020-04-13 13:51:45 · 718 阅读 · 0 评论 -
kafka到hive的解决方案
对于那些想要把数据快速摄取到Hadoop中的企业来讲,Kafka是一个很好的选择。Kafka是什么?Kafka是一个分布式、可伸缩、可信赖的消息传递系统,利用发布-订阅模型来集成应用程序/数据流。同时,Kafka还是Hadoop技术堆栈中的关键组件,能够很好地支持实时数据分析或者货币化的物联网数据。 下面就图解Kafka是如何把数据流从RDBMS(关系数据库管理系统)导入Hive,同时借助一个实...原创 2020-04-10 22:14:04 · 1579 阅读 · 0 评论 -
Hive介绍
Hive介绍: facebook开发的,用于分析海量数据使用。为了解决公司内部好多员工熟悉SQL,但是不熟悉编写程序(mapreduce是通过编写代码实现的) 是一个分析框架,不是数据存储框架,本身不存储业务的数据。Hive处理的数据存放在HDFS中。 提供SQL查询(HQL),SQL形式跟MYSQL的基本一样。 执行HQL后转化成mapreduce的程序,在后台提交给YARN,由YARN...原创 2020-04-10 21:34:01 · 268 阅读 · 0 评论