Elasticsearch 7.16 强势升级至 8.13.4,引爆数据革命新纪元!
简介Elasticsearch是一个强大的搜索和分析引擎,随着新版本的发布,升级是保持系统性能和安全性的关键。将Elasticsearch从7.16升级到8.13.4是一个复杂且关键的过程,涉及多方面的准备和实施步骤。准备工作备份数据在进行任何升级操作之前,务必对现有的 Elasticsearch 数据进行全量备份。可以使用 Elasticsearch 的 Snapshot...
简介
Elasticsearch是一个强大的搜索和分析引擎,随着新版本的发布,升级是保持系统性能和安全性的关键。将Elasticsearch从7.16升级到8.13.4是一个复杂且关键的过程,涉及多方面的准备和实施步骤。
准备工作
-
备份数据
在进行任何升级操作之前,务必对现有的 Elasticsearch 数据进行全量备份。可以使用 Elasticsearch 的 Snapshot 功能或其他备份工具进行备份。
PUT /_snapshot/my_backup
{
"type": "fs",
"settings": {
"location": "/mount/backups/my_backup"
}
}
-
验证插件和依赖项
确保所有使用的插件和依赖项在新版本中仍然兼容和可用。有些插件可能需要升级到与 Elasticsearch 8.x 兼容的版本。
-
检查系统要求
确保新版本的 Elasticsearch 符合所需的 Java 版本和操作系统要求。
升级步骤
-
升级到 7.17
升级到 7.17.5 是必要的步骤,因为它允许您使用升级助手来识别和解决问题。如果ES的版本的是7.0之前的,就不能采用下面的这种升级方法了,需要重新索引 7.0 之前创建的索引,并进行滚动升级,也就是第二种方案介绍的重建索引。
ES最初版本是7.16.3,所以不用_reindex重新索引,源端索引版本小于 7.0的需要_reindex重新索引此操。
1.禁用分片重新分配
PUT /_cluster/settings
{
"persistent": {
"cluster.routing.allocation.enable": "none"
}
}
2.停止 Elasticsearch 服务
在升级节点之前,停止 Elasticsearch 服务。
3.备份当前节点的数据
在升级节点之前,备份当前节点的数据和配置文件,以防万一。
4.逐个节点升级
-
关闭节点
-
安装新版本
###分词器
https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.17.5/elasticsearch-analysis-ik-7.17.5.zip
##kibanawget
wget https://artifacts.elastic.co/downloads/kibana/kibana-7.17.5-linux-x86_64.tar.gz
###ES
wget https://github.com/elastic/elasticsearch/archive/refs/tags/v7.17.5.tar.gz
tar -zxvf elasticsearch-7.17.5-linux-x86_64.tar.gz
cd elasticsearch-7.17.5/
将旧版本的配置文件 (elasticsearch.yml) 中的设置迁移到新的配置文件中。确保所有配置项在新版本中仍然有效。
添加新的参数:(升级助手提示添加)
cluster.routing.allocation.disk.watermark.enable_for_single_data_node: true
kibana配置文件添加下这个参数(升级助手提示添加)
vim kibana.yml
xpack.reporting.roles.enabled: false
-
启动节点
./bin/elasticsearch
确认节点已加入集群并状态为 green
GET /_cat/nodes?v
检查集群健康状态:
确保集群健康状态为绿色。
GET /_cluster/health
重复以上步骤:
逐个节点进行升级,直到集群中的所有节点都完成升级。
5.重新启用分片重新分配
PUT /_cluster/settings
{
"persistent": {
"cluster.routing.allocation.enable": null
}
}
6.使用升级助手准备升级到 Elasticsearch 8.13.4
安装升级助手:
在 Elasticsearch 7.17 中安装 Upgrade Assistant 插件。
bin/elasticsearch-plugin install analysis-icu
# 在 Kibana 中找到升级助手
Management > Elasticsearch > Upgrade Assistant
运行升级助手:
使用 Upgrade Assistant 插件来识别和解决升级前的问题。升级助手将检测到的问题报告为警告或错误,并指导您如何解决它们。
在浏览器中访问升级助手的 URL,并按照提示进行操作。
http://localhost:5601/app/upgrade_assistant
解决问题:
在运行升级之前,确保解决所有的严重问题和警告。
-
升级到 Elasticsearch 8.13.4
将集群从 7.17 升级到 8.x:
-
下载并安装 8.x 版本的 Elasticsearch
###kibaba
wget https://artifacts.elastic.co/downloads/kibana/kibana-8.13.4-linux-x86_64.tar.gz
##分析器
wget https://release.infinilabs.com/analysis-ik/stable/elasticsearch-analysis-ik-8.13.4.zip
##ES
wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-8.13.4-linux-x86_64.tar.gz
ES配置文件删除这个参数(升级助手提示)
cluster.routing.allocation.disk.watermark.enable_for_single_data_node: true
-
逐个节点进行滚动升级,步骤同上。
替代方案:创建新集群并重新索引
如果滚动升级的停机时间和风险不可接受,可以考虑创建一个新的 Elasticsearch 8.x 集群,然后将数据从旧集群重新索引到新集群。这种方法可以避免对现有集群进行大规模变动。
-
创建新集群
在新环境中部署一个 8.x 版本的 Elasticsearch 集群。
-
从远程重新索引
使用 _reindex API 从旧集群中重新索引数据到新集群:
POST /_reindex
{
"source": {
"remote": {
"host": "http://old-cluster:9200"
},
"index": "old_index"
},
"dest": {
"index": "new_index"
}
}
注意事项
插件和定制脚本:
确保所有使用的插件和自定义脚本在新版本中仍然有效。有些插件可能需要更新到与 Elasticsearch 8.x 兼容的版本,例如Ik、kibana。
Java 版本:
确保安装的 Java 版本符合 Elasticsearch 8.x 的要求。
配置文件变更:
新版本的 Elasticsearch 可能会有一些配置文件的变更,如集群名称、节点设置等。确保更新配置文件以适应新版本的要求。
安全设置:
Elasticsearch 8.x 可能会增强安全功能,如角色、权限管理等。确保在升级后重新配置和设置安全相关的参数。
性能监控:
升级后,密切关注集群的性能和健康状态。确保在升级过程中没有引入性能问题或其他异常情况。
REST API 兼容性:
8.x 版本支持 REST API 的兼容模式,但不保证与 7.x 版本相同的行为。建议尽快将所有请求升级到新版本的语法和功能。
结论
升级 Elasticsearch 是一个复杂的任务,需要详细的准备工作和逐步执行的升级步骤。通过升级到 7.17,再到 8.13.4,您可以利用升级助手来识别和解决问题,确保顺利完成升级并保持集群的高可用性和稳定性。在升级之前,请务必详细阅读官方文档并进行全面的测试,以确保升级过程安全可靠
加入数据库技术交流群:
进群福利:
1、知识共享与学习机会
2、问题求助与解决支持
3、技术沉淀和分享平台
4、及时了解行业动态

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。
更多推荐
所有评论(0)