CottonDuke的博客

ES 建动态模板索引，设置String 类型写入时，在ES里面设置索引类型为keyword ,避免提前建索引。 PUT /index_name { "settings": { "index": { "number_of_shards": "5", "refresh_interval": "5s", "number_of_r...

Elasticsearch Date类型使用技巧 作者: rockybean  时间: February 27, 2015  分类: 技术 elasticsearch原生支持date类型，结合该类型和Kibana可以做出漂亮有用的图表。这里简单记录下使用的方法。 使用date类型可以用如下两种方式： 使用毫秒的时间戳，直接将毫秒值传入即可。 传入格式化的字符串

Elasticsearch——分页查询From&Size VS scroll Elasticsearch中数据都存储在分片中，当执行搜索时每个分片独立搜索后，数据再经过整合返回。那么，如果要实现分页查询该怎么办呢？ 更多内容参考Elasticsearch资料汇总 按照一般的查询流程来说，如果我想查询前10条数据： 1 客户端请求发给某个节点2 节点转发给

elasticsearch mysql对应关系 MySQL  elasticsearch database(数据库) index(索引库) table(表) type(类型) row(行) document(文档) column(列)  field(字段) Elasticsearch是一个基于L

1逻辑语法： And OR  也能用（）分组，相当于先执行括号里的命令  2 字段前面加上+ 表示必须包含此字段，-表示不包含此字段 3以下字符当作值搜索的时候需要用\转义 + - && || ! () {} [] ^" ~ * ? : \ 例子： +orderCategory:1 And +sendStoreCode:"G02101023" And  +operat

环境： es 2.2.1   hadoop 2.7.3 hive 2.2.1 利用插件讲hive里面的数据写入es 在es可下载插件 elasticsearch-hadoop-2.2.0.jar 比如要把basic_table里的数据写到es里面 1、首先则hive里面建表 drop  table if exists basic_table_es; create

curl 模拟post请求 后面 >>aa.txt是将输出重定向，也可以不写 curl -H "Content-Type:application/json" -X POST --data '{"invoice_id":"051","bill_number":"1","doc_total":12,"file_dir":"/nfsc/EIS_CORE/ESG-TPI-CORE/BB01","r

1指定分片数量  "number_of_shards":8 2指定副本数量   "number_of_replicas" : 1 3指定刷新时间30s,写入数据时，查看到的数据与真实数据有30s的延时   "refresh_interval":"30s" 4禁用_all 字段    "_all":{ "enabled": false} curl -XDELETE 'http://'

增加配置信息 val conf = new SparkConf() conf.setAppName("etl_data_to_es") conf.set("es.net.ssl", "true") conf.set("es.net.ssl.truststore.location", "truststore.jks") conf.set("es.net.ssl.protocol", "TLSv1

官网信息 https://www.elastic.co/guide/en/elasticsearch/hadoop/master/configuration.html es.nodes.wan.only (default false) Whether the connector is used against an Elasticsearch instance in a cloud

按条件查询，将查询结果存储在文件中，size不能超过10000 curl -XPOST http://ipaddress:9200/incbdpiforder/orders/_search?pretty -d ' { "query": { "bool": { "must": [ { "term": { "incDay": "20170502" } } , { "term&qu

1count 命令 curl -XGET 'http://10.202.33.206:9200/incbdpiforder/_count' -d' { "query":{ "range": { "timestamp":{ "gt": "now-5m", "lt": "now" } } } }' 2删除命令 incDay是字符串类型，格式：2017-10-10 curl -XPO...