检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
配置Elasticsearch集群读写分离 场景描述 读写分离支持将写入主集群(Leader)的数据自动同步到从集群(Follower),实现主集群承担写入任务,从集群承担查询任务。读写分离可以将读写压力分开,提高查询的性能。当主集群无法提供服务时,可以通过主从切换使用从集群提供写入和查询服务
使用Logstash将Kafka数据接入Elasticsearch 本文介绍如何使用云搜索服务CSS的Logstash将Kafka中的数据接入到CSS的Elasticsearch中。Logstash作为ELK(Elasticsearch、Logstash、Kibana)日志方案中的关键组件
配置OpenSearch集群路由 当CSS服务的OpenSearch集群需要访问客户端或其他服务(如LDAP)时,如果集群与目标服务位于不同VPC,默认无法直接通信。此时需要配置OpenSearch集群路由打通网络。 图1 配置集群路由 建立VPC对等连接:打通两个VPC之间的网络
配置Elasticsearch集群路由 当CSS服务的Elasticsearch集群需要访问客户端或其他服务(如LDAP)时,如果集群与目标服务位于不同VPC,默认无法直接通信。此时需要配置Elasticsearch集群路由打通网络。 图1 配置Elasticsearch集群路由
配置Elasticsearch集群公网访问 当集群开启了“安全模式”和“HTTPS访问”时,可以选择是否配置“公网访问”。配置公网访问后,用户可以获得一个公网访问的IP地址,通过这个IP地址可以在公网访问该安全集群。同时,还支持配置访问控制,设置允许公网访问集群的IP地址或网段。
配置OpenSearch集群公网访问 当集群开启了“安全模式”和“HTTPS访问”时,可以选择是否配置“公网访问”。配置公网访问后,用户可以获得一个公网访问的IP地址,通过这个IP地址可以在公网访问该安全集群。同时,还支持配置访问控制,设置允许公网访问集群的IP地址或网段。 Elasticsearch
配置Logstash集群路由 当CSS服务的Logstash集群(服务端)和数据源位于不同的VPC网络时,默认情况下Logstash无法从数据源读取数据,也无法输入数据。为确保网络互通,您需要在Logstash添加数据源的路由信息。 图1 配置Logstash集群路由 建立VPC对等连接
规划节点类型和规格容量 介绍集群各类节点类型(数据节点、Master节点、Client节点、冷数据节点)的适用场景和配置建议,帮助用户根据业务需求合理选择和配置节点类型。同时,给出节点规格、存储类型和容量、节点数量的配置建议,方便用户合理规划集群的规格容量。 规划节点类型 在创建集群时
规划节点类型和规格容量 介绍集群各类节点类型(数据节点、Master节点、Client节点、冷数据节点)的适用场景和配置建议,帮助用户根据业务需求合理选择和配置节点类型。同时,给出节点规格、存储类型和容量、节点数量的配置建议,方便用户合理规划集群的规格容量。 规划节点类型 在创建集群时
Elasticsearch使用流程 表1 Elasticsearch集群的使用流程 任务分类 操作 参考文档 使用 规划集群 在创建Elasticsearch集群前,需要先完成集群规划。规划时,应考虑是否多可用区部署以提高集群的高可用性,合理配置集群的节点类型与节点存储规格,以及根据业务需求选择适当的集群版本和安全模式
配置Elasticsearch集群索引监控 场景描述 索引监控功能用以监测集群索引的运行状态和变化趋势,评估业务使用情况,并能够协助及时发现并处理潜在风险,确保集群稳定运行。索引监控会收集索引的stats信息,并将其存储在集群的监控索引(索引名称是“monitoring-eye-css
配置Logstash公网访问 CSS服务的Logstash作为数据接入服务,面对公网数据源,需配置特定参数实现数据读取,再将数据写入目标存储系统,保障数据流转顺畅,满足企业大数据分析、日志管理等需求。通过NAT网关与回程路由协同配置,Logstash集群能顺利访问公网数据,完成采集
通过华为云Logstash实现Elasticsearch集群间数据迁移 使用华为云CSS服务的Logstash集群可以实现Elasticsearch集群间的数据迁移。 应用场景 华为云Logstash是一款全托管的数据接入处理服务,兼容开源Logstash的能力,支持用于Elasticsearch
配置Elasticsearch集群终端节点服务 终端节点服务(VPC Endpoint Service)通过专属网关,可以将VPC中的服务方便地提供给其他VPC中的资源使用,实现跨VPC的内网访问而不必暴露服务端相关的网络信息,使您的访问更加安全、可靠。终端节点的访问地址包括IPv4
配置OpenSearch集群终端节点服务 终端节点服务(VPC Endpoint Service)通过专属网关,可以将VPC中的服务方便地提供给其他VPC中的资源使用,实现跨VPC的内网访问而不必暴露服务端相关的网络信息,使您的访问更加安全、可靠。终端节点的访问地址包括IPv4地址和内网域名