
大数据
文章平均质量分 59
鸿语zlx
这个作者很懒,什么都没留下…
展开
-
Elasticsearch语法
GET _search { "query": { "match_all": {} } } PUT /lagou-company-index/ #检查索引是否存在 HEAD /lagou-company-index #查看索引,也可以多个索引一起查询,用逗号隔开 GET /lagou-company-index #查看所有索引1 GET _all #查看所有索引2 GET /_cat/indices?v #打开索引 POST /lagou-company-index/_open原创 2021-07-07 09:48:37 · 227 阅读 · 0 评论 -
数据分析架构对比
1.1数据分析的基础架构分类: 使用Hadoop/Spark进行分析 将Hadoop/Spark的结果导入 RDBMS 中提供数据分析 将结果保存到容量更大的 NoSQL 数据库中,解决数据分析的存储瓶颈,例如:HBase 将数据源进行流式处理,对接流式计算框架(如Storm、Spark、Flink),结果保存到 RDBMS或NoSQL中 将数据源进行流式处理,对接分析数据库,例如:Druid 互联网技术的快速增长催生了各类大体量的数据,Hadoop很大的贡献在于帮助企业将他们那些低价值的事件流数据转原创 2021-06-30 09:55:29 · 633 阅读 · 0 评论 -
java连接hbase、redis、mysql
很多时候突然要写一个连接的时候,还要去找度娘,特意整理下,要求自己时不时来看看。 hbase连接 package com.lagou.hbase.client; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.*; import org.apache.hadoop.hbase.client.*; import org.apache.hadoop.hbase.util.Bytes; import org.原创 2021-06-18 10:46:57 · 196 阅读 · 0 评论 -
大数据集群部署
标题 备注:√:表示安装在当前服务器上,另含服务起来后的进程名 工具或服务名 linux1 linux2 linux3 web页面 相关端口号 mysql √ zookeeper √ √ √ hdfs NameNode、DataNode DataNode SecondaryNameNode、DataNode http://zb26105:50070/dfshealth.html#tab-overview、http://zb26105:50070/explorer.html原创 2021-06-16 22:04:39 · 416 阅读 · 2 评论