
ES
文章平均质量分 78
青山流水在深谷
大数据开发
展开
-
ES 安装文档
一 安装ES1.下载ES,header(ES集群图形管理),Node(npm安装header)2.解压ESunzip elasticsearch-5.6.4.zip3.配置ES 的.yml文件,对应用户下的.profile文件进行全局执行命令(1) vim elasticsearch.ymlcluster.name: my-es## -------------------...原创 2018-07-30 03:50:54 · 299 阅读 · 0 评论 -
ES安装文档
一 安装ES1.下载ES,header(ES集群图形管理),Node(npm安装header)2.解压ESunzip elasticsearch-5.6.4.zip3.配置ES 的.yml文件,对应用户下的.profile文件进行全局执行命令(1) vim elasticsearch.ymlcluster.name: my-es## -------------------...原创 2018-07-30 03:54:51 · 431 阅读 · 0 评论 -
ES 相关基本概念
1.index --同RDBMS 的schema 数据库类型2.Type 类型 --同数据表3.Document --同RDBMS 一组关系:一条记录4.Field :字段对应列ES 主从架构,去中心花(任意节点都可以同ES集群通信,并且是等价,P2P网络架构,即使master,又是data节点主节点(master node),数据节点(data node)主节点:...原创 2018-07-30 03:55:40 · 1049 阅读 · 0 评论 -
ES 数据迁移至HDFS
es 备份存储方式支持以下几种方式:fs 文件挂载url 网络协议存储 (http,https,ftp)s3 亚马逊hdfsazure 微软gcs 谷歌(1) repository(仓库)es集群中,想要备份数据,必须创建仓库,用来存储快照,一个集群可以创建多个仓库(2) snapshot (快照)创建仓库后,我们可以创建快照,创建快照时必须指定一个仓库,需要依附某个仓...原创 2018-07-30 03:56:23 · 3224 阅读 · 1 评论 -
ES 问题总结
1.spark-es 无法处理数组类型字段18/05/05 15:32:27 WARN sql.ScalaRowValueReader: Field 'hobby' is backed by an array but the associated Spark Schema does not reflect this; (use es.read.field.as.ar...原创 2018-07-30 03:56:52 · 680 阅读 · 0 评论 -
ElasticSearch 5.6.X和6.X版本的 X-PACK license破解
一.创建 LicenseVerifier.java 文件,重新编译(替换5.6.x的x-pack-5.6.11.jar;替换6.x的x-pack-core-6.x.jar)(1) 版本 5.6.x:a.任意位置创建文件LicenseVerifier.javavim LicenseVerifier.javapackage org.elasticsearch.license;imp...原创 2019-06-06 14:48:13 · 1812 阅读 · 0 评论 -
Flume + es + redis + MySQL
package com.geo.cn;import com.alibaba.fastjson.JSONArray;import com.geo.cn.pojo.DaModel;import com.geo.cn.pojo.Score;import com.geo.cn.util.*;import org.apache.commons.lang.StringUtils;import...原创 2019-12-02 15:54:18 · 92 阅读 · 1 评论