IndexRequest 实现Elasticsearch数据的更新和插入

本文总结了JavaHighLevelRESTClient中IndexAPI的使用方法,包括创建IndexRequest,使用JSON对象、Map或直接赋值的方式设置请求源,设置分片超时时间,刷新策略,以及操作类型如更新或创建。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

通过学习Java High Level REST Client官方文档,进行一些总结。
本文为关于Index API的总结:

IndexRequest request = new IndexRequest("索引", "type","id");   
request.source("转换为json的对象", XContentType.JSON); 

同样也支持使用Map的形式放入对象

Map<String, Object> jsonMap = new HashMap<>();
jsonMap.put("字段1", "值");
jsonMap.put("字段2", new Date());
jsonMap.put("字段3", "值");
IndexRequest indexRequest = new IndexRequest("索引", "tyep", "id")
        .source(jsonMap); 

也可以直接在source中对需要的对象进行赋值

IndexRequest indexRequest = new IndexRequest("index", "type", "id")
        .source("字段1", "值",
                "字段2", new Date(),
                "字段3", "值"); 

设置分片超时时间,以下两种方式均可

request.timeout(TimeValue.timeValueSeconds(1)); 
request.timeout("1s"); 

设置刷新策略,若未设置最常见的情况就是执行es中数据更新或插入,同步去查询时数据发现没有更新。

request.setRefreshPolicy(WriteRequest.RefreshPolicy.WAIT_UNTIL); 
request.setRefreshPolicy("wait_for"); 

通过设置poType为“update”or“create”设置更新或者修改

request.opType(DocWriteRequest.OpType.CREATE); 
request.opType("create"); 

Java High Level REST Client官方文档原文链接

使用elasticsearch-sql框架,可以通过以下步骤将SQL数据插入ES: 1. 创建一个ES索引,定义字段映射 2. 使用ES-SQL框架连接ES,执行SQL查询获取数据 3. 遍历查询结果,使用ES-SQL框架提供的API将数据插入ES 下面是一个示例代码,演示如何使用ES-SQL框架将SQL数据插入ES: ```java import io.github.iamazy.elasticsearch.dsl.sql.parser.SqlParser; import org.elasticsearch.action.bulk.BulkRequest; import org.elasticsearch.action.bulk.BulkResponse; import org.elasticsearch.client.RequestOptions; import org.elasticsearch.client.RestHighLevelClient; import org.elasticsearch.index.query.QueryBuilders; import org.elasticsearch.rest.RestStatus; import org.elasticsearch.search.builder.SearchSourceBuilder; import org.nlpcn.es4sql.exception.SqlParseException; import org.nlpcn.es4sql.query.QueryAction; import org.nlpcn.es4sql.query.SqlElasticRequestBuilder; import java.io.IOException; import java.sql.*; public class SqlToEs { // 定义ES索引名称 private static final String INDEX_NAME = "my_index"; // 定义ES连接客户端 private RestHighLevelClient client; // 定义SQL查询语句 private String sql = "SELECT * FROM my_table WHERE id > 100"; public SqlToEs() { // 初始化ES连接客户端 client = new RestHighLevelClient(); } public void insert() throws SQLException, IOException, SqlParseException { // 解析SQL查询语句 SqlParser sqlParser = new SqlParser(); QueryAction queryAction = sqlParser.parseSelect(sql); // 构建ES查询请求 SqlElasticRequestBuilder requestBuilder = queryAction.explain(); SearchSourceBuilder sourceBuilder = requestBuilder.getSourceBuilder(); sourceBuilder.query(QueryBuilders.matchAllQuery()); String query = sourceBuilder.toString(); // 执行SQL查询获取数据 Connection conn = DriverManager.getConnection("jdbc:mysql://localhost:3306/my_database", "user", "password"); Statement stmt = conn.createStatement(); ResultSet rs = stmt.executeQuery(query); // 遍历查询结果,将数据插入ES BulkRequest request = new BulkRequest(); while (rs.next()) { // 创建一个ES文档 Map<String, Object> document = new HashMap<>(); document.put("id", rs.getInt("id")); document.put("name", rs.getString("name")); document.put("age", rs.getInt("age")); // 添加到批量请求中 request.add(new IndexRequest(INDEX_NAME).source(document)); } // 执行批量请求 BulkResponse bulkResponse = client.bulk(request, RequestOptions.DEFAULT); if (bulkResponse.status() == RestStatus.OK) { System.out.println("数据插入成功!"); } } } ``` 这里使用ES-SQL框架解析SQL查询语句,并构建ES查询请求。然后执行SQL查询获取数据,并遍历查询结果,将数据插入ES。最后使用ES客户端执行批量请求,将数据插入ES。
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值