云硬盘(EVS)是云服务提供的一种虚拟块存储服务,独立于ECS实例存在,提供高可靠性和弹性扩展能力。适合对数据可靠性要求较高且需要灵活扩展存储能力的业务场景。 以下是不同节点规格的适用场景及核心特性说明,帮助用户合理规划集群架构。
使用DSL语言在OpenSearch中搜索数据 DSL语言是OpenSearch查询域的特定语言,是客户端与OpenSearch集群交互的最佳语言。OpenSearch DSL是基于JSON格式的语言,其他语言如SQL本质上也是先转译为OpenSearch DSL再与OpenSearch
使用SQL语言在OpenSearch中搜索数据 在OpenSearch版本中提供Open Distro for OpenSearch SQL插件允许您使用SQL而不是OpenSearch查询域特定语言(DSL)编写查询。 熟悉SQL语言的用户,可以使用SQL语言在OpenSearch
OpenSearch集群支持多种客户端访问,本文仅以CSS服务集成的OpenSearch Dashboards为例介绍配置指导。 登录云搜索服务管理控制台。 在左侧导航栏,选择“集群管理 > OpenSearch”。
查看集群的依赖服务 依赖服务属于当前集群的子服务,该集群作为其父服务存在。例如,在AI搜索场景下,Elasticsearch集群依赖独享版搜索大模型,此时独享版搜索大模型即为Elasticsearch集群的依赖服务。
配置告警规则 登录云监控服务CES管理控制台。 左侧导航栏选择“告警 > 告警规则”,进入告警规则列表页面。 在告警规则列表,搜索“资源类型”为“云搜索服务”,查看是否有满足要求的告警规则。 如果没有,请参考云监控服务CES的创建告警规则和通知,新建CSS服务的告警规则。
配置Logstash集群路由 当CSS服务的Logstash集群(服务端)和数据源位于不同的VPC网络时,默认情况下Logstash无法从数据源读取数据,也无法输入数据。为确保网络互通,您需要在Logstash添加数据源的路由信息。
NO_MONITOR:后端云服务器所在的服务器组没有健康检查器。 OFFLINE:后端云服务器关联的ECS服务器不存在或已关机。 instance_id String 参数解释: member关联的实例ID。 取值范围: 空表示member关联的实例为非真实设备。
优化Elasticsearch和OpenSearch集群写入性能 CSS服务中的Elasticsearch和OpenSearch集群在使用前,建议参考本文进行集群的写入性能优化,便于提高集群的写入性能,提升使用效率。
Elasticsearch集群某一节点分配不到shard 解决方案 使用GET _cluster/allocation/explain?pretty 查看未分配shard。 在console上,选择“cerebro > more > cluster settings ”-,在左上角输入
云搜索服务在7.6.2及以上的版本,集群内通信端口9300默认开放在用户VPC的子网上。集群所选安全组需要放通子网内的9300通信端口才能保证节点之间通信。 处理步骤 在集群管理页面,单击不可用的集群名称,进入集群基本信息页面。
接入集群 在弹性云服务器ECS上安装LDAP服务,如果已提前准备好LDAP服务和用户数据,则可以跳过该步骤。 创建ECS。ECS需要选择Windows系统,且和CSS服务的安全集群在同一个虚拟私有云和安全组中。
使用开源OpenSearch API导入数据到OpenSearch 云搜索服务支持在Kibana或者ECS服务器上使用开源OpenSearch API将数据导入到OpenSearch集群中,数据文件支持JSON等格式。
向量检索特性介绍 在人工智能时代,图像、视频、音频、文本语料等非结构化数据激增,传统的关键词搜索难以有效捕捉这些数据深层的语义或视觉特征,为了解决这个问题,CSS服务提供了向量检索功能。
通过内网地址访问Kibana登录Elasticsearch集群 同一VPC下的服务器才能通过Elasticsearch集群的内网访问地址访问Kibana。 登录云搜索服务管理控制台。
管理向量索引缓存 CSS向量检索引擎基于C++构建,采用堆外内存技术以提升性能和效率。为更好地管理和优化向量索引缓存,CSS向量数据库提供了一系列专用接口,使用户能够灵活地监控和调整缓存使用情况,从而确保查询性能的稳定性和可靠性。 查看缓存统计信息 通过下面的API检索堆外内存的使用情况
给云硬盘EVS服务下发所有集群节点的云硬盘扩容请求。 云硬盘扩容完成后,所有节点一起扩展已有磁盘卷的大小。 整个扩容过程中,不会中断现有业务。 前提条件 确认集群处于“可用”状态,且无正在进行的任务。 确认CSS服务有足够的配额支持变更规格,在形态变更页面可以查看当前可用资源。
前提条件 创建配置文件前,必须先获取数据源和目的端的服务器或集群信息,例如IP地址、用户名、密码等。 创建配置文件 登录云搜索服务管理控制台。 左侧导航栏选择“集群管理 > Logstash”,进入集群列表页面。 在集群列表,单击集群操作列的“配置中心”,进入配置中心页面。
创建OpenSearch向量集群 CSS向量数据库通过结合高效索引技术,为高维向量检索提供了高性能、低成本、易扩展的解决方案。OpenSearch向量集群通过将非结构化数据转换为高维向量,并结合向量索引技术(如HNSW图索引、乘积量化等),可实现近似最近邻检索(ANN),在保证高召回率的同时显著降低计算复杂度
SSL解析方式 客户端到服务器端认证方式。仅“前端协议”选择“HTTPS”才需要配置。 根据实际业务需要选择解析方式。 服务器证书 服务器证书用于SSL握手协商,需提供证书内容和私钥。仅“前端协议”选择“HTTPS”才需要配置服务器证书。