心丨悦 的专栏

ES查询中，有时候我们需要按照字段的长度过滤。以下为方法：GET hockey/_search{  "query": {    "script": {      "script": {        "source": "doc['city'][0].length()>3",        "lang": "painless"      }  

很早之前就在windows上搭建过ELK日志，最近项目用到分布式系统，涉及到很多linux服务器，再用原来的logstash去采集日志明显不合适，原因是logstash占用内存过高，每台机子上都部署的话比较浪费内存。以前是用windows环境，现在用阿里云的CentOS7.4，其中也有许多坑（对于我这linux小白来说），记录下来希望能帮助其他人说一下环境与软件配置：linu...

Elasticsearch-logstash同步mysql数据 如果标识位点位时间出现无法保存的问题如上图，需要加上标示为声明为时间格式tracking_column_type => "timestamp"

logstash同步mysql数据的时候，sql里面含有的大写字母，到了ES的时候就会变成小写，这是因为在jdbc.conf里面没有添加lowercase_column_names => false"这个属性，就导致es里面看到的字段名称全是小写。最后总结：es是支持大写字段名称的，如果想要保留原有的大写字母，需要在同步配置中加上lowercase_column_names ...

1、题记Elasticsearch有没有类似mysql的distinct的去重功能呢？1）如何去重计数？类似mysql: select distinct(count(1)) from my_table;2）如何获取去重结果。类似mysql：SELECT DISTINCT name,age FROM users;2、需求1）对ES的检索结果进行去重统计计数。2）对ES的检索结...

{　  "type" : "text", #是数据类型一般文本使用text(可分词进行模糊查询)；keyword无法被分词(不需要执行分词器)，用于精确查找    "analyzer" : "ik_max_word", #指定分词器，一般使用最大分词：ik_max_word        "normalizer" : "normalizer_name", #字段标准化规则；如把所

POST main_company_info_v4/_delete_by_query{  "query": {    "bool": {      "must": [        {          "range": {            "invest": {              "gte": 10,              "lte": 20   

高亮搜索POST /index/_search{"query": {"match": {"field": "中国"}},"highlight": {"fields": {"field": {"pre_tags": "","post_tags": ""}}}}

location 经纬度字段，distance 距离中心范围KM，lat lon 圆心经纬度distanceQueryBuilder = QueryBuilders.geoDistanceQuery(location) .distance(distance, DistanceUnit.KILOMETERS) .point(new GeoPoint(lat, lon));

聚合字段需要为keyword类型、text类型需设置fielddata为true，将按照分词聚合GET /my_index/_search{"query": {"size": 0, "aggs": {"models": {"terms": { "field": "status_keyword" }}}}

添加字段并设置类型PUT /my_index/_mapping/my_type{"base_policy_basic_info": {"properties": {"city": {"type": "text","analyzer":"ik_max_word","fields":{"raw": {"type": "keyword"}}}

设置mapping的时候需要设置fielddata 为truePUT my_index/_mapping/my_type{  "properties": {    "my_field": {       "type":     "text",      "fielddata": true    }  }}

POST /_aliases{"actions": [{ "remove": {"index": "旧索引名","alias": "别名"} },{ "add": {"index": "新索引名","alias": "别名"} }]}

DSL语法如下：GET main_company_info/_search{ "query": { "match_all": {} }, "size": 0, "aggs": { "groupby-fiel": { "terms": { "field": "register_year", "size": 2 ...