8f4d37183a4e728a2c1bd08b85743394.jpeg

简介      

      Elasticsearch是一个强大的搜索和分析引擎,随着新版本的发布,升级是保持系统性能和安全性的关键。将Elasticsearch从7.16升级到8.13.4是一个复杂且关键的过程,涉及多方面的准备和实施步骤。

准备工作

  • 备份数据

在进行任何升级操作之前,务必对现有的 Elasticsearch 数据进行全量备份。可以使用 Elasticsearch 的 Snapshot 功能或其他备份工具进行备份。

PUT /_snapshot/my_backup
{
  "type": "fs",
  "settings": {
    "location": "/mount/backups/my_backup"
  }
}
  • 验证插件和依赖项

确保所有使用的插件和依赖项在新版本中仍然兼容和可用。有些插件可能需要升级到与 Elasticsearch 8.x 兼容的版本。

  • 检查系统要求

确保新版本的 Elasticsearch 符合所需的 Java 版本和操作系统要求。

升级步骤

  • 升级到 7.17

升级到 7.17.5 是必要的步骤,因为它允许您使用升级助手来识别和解决问题。如果ES的版本的是7.0之前的,就不能采用下面的这种升级方法了,需要重新索引 7.0 之前创建的索引,并进行滚动升级,也就是第二种方案介绍的重建索引。

ES最初版本是7.16.3,所以不用_reindex重新索引,源端索引版本小于 7.0的需要_reindex重新索引此操。

1.禁用分片重新分配

PUT /_cluster/settings
{
  "persistent": {
    "cluster.routing.allocation.enable": "none"
  }
}

2.停止 Elasticsearch 服务 

在升级节点之前,停止 Elasticsearch 服务。

3.备份当前节点的数据 

在升级节点之前,备份当前节点的数据和配置文件,以防万一。

4.逐个节点升级

  • 关闭节点

  • 安装新版本


###分词器 
https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.17.5/elasticsearch-analysis-ik-7.17.5.zip                 
##kibanawget 
wget https://artifacts.elastic.co/downloads/kibana/kibana-7.17.5-linux-x86_64.tar.gz
###ES
wget https://github.com/elastic/elasticsearch/archive/refs/tags/v7.17.5.tar.gz
tar -zxvf elasticsearch-7.17.5-linux-x86_64.tar.gz
cd elasticsearch-7.17.5/
将旧版本的配置文件 (elasticsearch.yml) 中的设置迁移到新的配置文件中。确保所有配置项在新版本中仍然有效。
添加新的参数:(升级助手提示添加)
cluster.routing.allocation.disk.watermark.enable_for_single_data_node: true


kibana配置文件添加下这个参数(升级助手提示添加)
vim kibana.yml
xpack.reporting.roles.enabled: false
  • 启动节点

./bin/elasticsearch
确认节点已加入集群并状态为 green
GET /_cat/nodes?v
检查集群健康状态:
确保集群健康状态为绿色。
GET /_cluster/health
重复以上步骤:
逐个节点进行升级,直到集群中的所有节点都完成升级。

5.重新启用分片重新分配

PUT /_cluster/settings
{
  "persistent": {
    "cluster.routing.allocation.enable": null
  }
}

6.使用升级助手准备升级到 Elasticsearch 8.13.4

安装升级助手:
在 Elasticsearch 7.17 中安装 Upgrade Assistant 插件。
bin/elasticsearch-plugin install analysis-icu
# 在 Kibana 中找到升级助手
Management > Elasticsearch > Upgrade Assistant


运行升级助手:
使用 Upgrade Assistant 插件来识别和解决升级前的问题。升级助手将检测到的问题报告为警告或错误,并指导您如何解决它们。


在浏览器中访问升级助手的 URL,并按照提示进行操作。
http://localhost:5601/app/upgrade_assistant


解决问题:
在运行升级之前,确保解决所有的严重问题和警告。

a17ee157ddd7d8dfed2ac7a182942e54.png

  • 升级到 Elasticsearch 8.13.4

将集群从 7.17 升级到 8.x:

  • 下载并安装 8.x 版本的 Elasticsearch

###kibaba
wget https://artifacts.elastic.co/downloads/kibana/kibana-8.13.4-linux-x86_64.tar.gz
##分析器
wget https://release.infinilabs.com/analysis-ik/stable/elasticsearch-analysis-ik-8.13.4.zip
##ES
wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-8.13.4-linux-x86_64.tar.gz


ES配置文件删除这个参数(升级助手提示)
cluster.routing.allocation.disk.watermark.enable_for_single_data_node: true
  • 逐个节点进行滚动升级,步骤同上。

替代方案:创建新集群并重新索引

如果滚动升级的停机时间和风险不可接受,可以考虑创建一个新的 Elasticsearch 8.x 集群,然后将数据从旧集群重新索引到新集群。这种方法可以避免对现有集群进行大规模变动。

  • 创建新集群

在新环境中部署一个 8.x 版本的 Elasticsearch 集群。

  • 从远程重新索引

使用 _reindex API 从旧集群中重新索引数据到新集群:

POST /_reindex
{
  "source": {
    "remote": {
      "host": "http://old-cluster:9200"
    },
    "index": "old_index"
  },
  "dest": {
    "index": "new_index"
  }
}

注意事项

插件和定制脚本:

确保所有使用的插件和自定义脚本在新版本中仍然有效。有些插件可能需要更新到与 Elasticsearch 8.x 兼容的版本,例如Ik、kibana。

Java 版本:

确保安装的 Java 版本符合 Elasticsearch 8.x 的要求。

配置文件变更:

新版本的 Elasticsearch 可能会有一些配置文件的变更,如集群名称、节点设置等。确保更新配置文件以适应新版本的要求。

安全设置:

Elasticsearch 8.x 可能会增强安全功能,如角色、权限管理等。确保在升级后重新配置和设置安全相关的参数。

性能监控:

升级后,密切关注集群的性能和健康状态。确保在升级过程中没有引入性能问题或其他异常情况。

REST API 兼容性:

8.x 版本支持 REST API 的兼容模式,但不保证与 7.x 版本相同的行为。建议尽快将所有请求升级到新版本的语法和功能。

结论

      升级 Elasticsearch 是一个复杂的任务,需要详细的准备工作和逐步执行的升级步骤。通过升级到 7.17,再到 8.13.4,您可以利用升级助手来识别和解决问题,确保顺利完成升级并保持集群的高可用性和稳定性。在升级之前,请务必详细阅读官方文档并进行全面的测试,以确保升级过程安全可靠

加入数据库技术交流群:

6a06d5fe74bdf305b5f977d999b77d26.jpeg

进群福利:

1、知识共享与学习机会

2、问题求助与解决支持

3、技术沉淀和分享平台

4、及时了解行业动态

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐