es转储备份

最新推荐文章于 2024-05-06 10:39:47 发布

原创最新推荐文章于 2024-05-06 10:39:47 发布

· 888 阅读

0 ·

版权

文章标签：

#elasticsearch #服务器 #大数据

该篇博客介绍了如何在Elasticsearch服务器上安装ESM，进行索引合并与备份，包括创建数据目录、设置环境变量、执行索引备份命令，并提供了应对大索引导致的转储失败的配置解决方案。此外，还提到了通过计数命令验证备份数据的完整性以及后续的清理步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1、在elastic服务器上操作：
安装esm
传入按转包
tar zxvf esm-linux64.tar.gz
mv bin/ /usr/local/esm
cd /usr/local/esm/
mkdir bin
mv linux64/ bin/
vim /etc/profile （最后添加PATH=$PATH:/usr/local/esm/bin/linux64）
source /etc/profile
cd /data/（进入到数据盘挂载目录）
mkdir es-bak
cd es-bak/
mkdir winlogbeat-bak
cd winlogbeat-bak/
esm -s http://192.168.1.11:9200（master es的IP） -x “winlogbeat-2019.02.*” -m elastic:Sccin1qazCDE# -c 1000 --refresh -o=winlogbeat-2019.02-dump.bin
可以用于合并索引，减少分片数，且可以用于备份
2、cat winlogbeat-2019.11-dump.bin | wc -l （核对数目是否正确）
然后清空个索引缓存–>清空个索引–>删除个索引

注：如果索引过大导致转储失败，在elasticseartch配置文件中（Discovery模块最低端）加：
http.max_initial_line_length: “8k”
http.max_header_size: “16k”
http.max_content_length: 500mb
（报错：[02-04 19:40:20] [ERR] [scroll.go:94,Next] {“error”:{“root_cause”:[{“type”:“too_long_frame_exception”,“reason”:“An HTTP line is larger than 4096 bytes.”}],“type”:“too_long_frame_exception”,“reason”:“An HTTP line is larger than 4096 bytes.”},“status”:400）