spark 导入数据 到 es 的时候报错:Caused by: org.elasticsearch.hadoop.EsHadoopIllegalArgumentException: Cannot determine write shards for [index/type]; likely its format is incorrect (maybe it contains illegal characters?)
看了网上的 一些答案 和我的情况不太符合,我这里是因为index 无法分配 shard ,index 是red状态 ,重新创建索引后 再次设置 mapping,卧槽,,,,莫名其妙,,我发现只要一设置 mapping 索引就变成 red 状态。但是设置mapping的 返回状态是 true,正确的。 尝试了很多方法都没什么效果,最后我想是不是因为频繁删除,创建导致的问题,然后我 放下es 让他冷静一下,让它好好反思一下!!!果然成功了,虽然不知道其中的原理是什么,或者只是碰巧。希望知道的盆友能分享一哈。
Spark导入ES异常解决
本文记录了一次使用Spark导入数据到Elasticsearch时遇到的错误处理过程,主要问题是索引处于red状态,导致无法分配shard。通过反复试验并给予ES足够的时间进行自我修复,最终解决了问题。
1万+

被折叠的 条评论
为什么被折叠?



