检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
使用Broker Load方式导入数据至Doris集群 Broker Load是一个异步的导入方式,支持的数据源取决于Broker进程支持的数据源。本文为您介绍Broker Load导入的基本原理、基本操作、系统配置以及最佳实践。 适用场景 源数据在Broker可以访问的存储系统中
数据倾斜调优 数据倾斜问题是分布式架构的重要难题,它破坏了MPP架构中各个节点对等的要求,导致单节点(倾斜节点)所存储或者计算的数据量远大于其他节点,所以会造成以下危害: 存储上的倾斜会严重限制系统容量,在系统容量不饱和的情况下,由于单节点倾斜的限制,使得整个系统容量无法继续增长。
CREATE TABLE SUBPARTITION 功能描述 创建二级分区表。分区表是把逻辑上的一张表根据某种方案分成几张物理块进行存储,这张逻辑上的表称之为分区表,物理块称之为分区。分区表是一张逻辑表,不存储数据,数据实际是存储在分区上的。对于二级分区表,顶层节点表和一级分区都是逻辑表
CREATE TABLE PARTITION 功能描述 创建分区表。分区表是把逻辑上的一张表根据某种方案分成几张物理块进行存储,这张逻辑上的表称之为分区表,物理块称之为分区。分区表是一张逻辑表,不存储数据,数据实际是存储在分区上的。 常见的分区方案有范围分区(Range Partitioning
PG_THREAD_WAIT_STATUS 通过PG_THREAD_WAIT_STATUS视图可以检测当前实例中工作线程(backend thread)以及辅助线程(auxiliary thread)的阻塞等待情况。 表1 PG_THREAD_WAIT_STATUS字段 名称 类型
8.1.0版本说明 【发布日期】:2021年5月15日 【集群版本号】:8.1.0.100 特性变更 表1 8.1.0特性变更 特性 描述 Analyze强化,支持临时表,支持单事务操作 事务、存储过程支持analyze命令;analyze和alter table并发时不会报错;自动
Hudi常见配置参数 本章节介绍Hudi重要配置的详细信息,更多配置请参考Hudi官网http://hudi.apache.org/cn/docs/configurations.html。 写入操作配置 表1 写入操作重要配置项 参数 描述 默认值 hoodie.datasource.write.table.name
PG_THREAD_WAIT_STATUS 通过PG_THREAD_WAIT_STATUS视图可以检测当前实例中工作线程(backend thread)以及辅助线程(auxiliary thread)的阻塞等待情况。 表1 PG_THREAD_WAIT_STATUS字段 名称 类型
变更DCS实例规格 DCS管理控制台支持变更Redis和Memcached缓存实例规格,即变更实例的类型、内存规格或副本数,您可以根据实际需要,选择合适的实例规格。 实例变更规格,不会影响实例的连接地址、访问密码及安全组/白名单配置等信息,也不需要重启实例。 除单机实例外,其他实例类型变更规格
将Microsoft SQL Server同步到Kafka 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 RDS for SQL Server(企业版2012、2014、2016、2017、2019版本,标准版2016 SP2及以上版本、2017、2019版本)
将Microsoft SQL Server同步到Kafka 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 本地自建Microsoft SQL Server(企业版2012、2014、2016、2017、2019版本,标准版2016 SP2及以上版本、2017、2019
重启MRS集群组件 MRS集群运行过程中,在修改了组件的配置项、基础资源故障或者服务进程异常等运维场景中,需要对集群内组件进行重启操作。 MRS集群内组件支持普通重启与滚动重启两种方式: 普通重启:直接并发重启集群内所有服务或实例,可能引起业务中断。 滚动重启:在尽可能不中断业务的前提下对相关对象进行的重启操作
其他优化器选项 cost_model_version 参数说明:此参数用来指定优化器代价模型的版本。可以视作一个保护参数,用来禁用最新的优化器代价模型,保持和旧版本计划一致。 参数类型:整型 参数单位:无 取值范围:0、1、2、3、4、5 0:表示使用最新的cost估算模型。当前版本等价于
自定义购买 本章节介绍如何在控制台通过自定义的方式购买副本集实例。自定义的购买方式更加灵活,您不仅可以根据业务需要定制相应计算能力和存储空间的副本集实例,而且可以在购买实例时进行一些高级配置,如:慢日志、自动备份等。 使用须知 每个租户下副本集实例的默认总配额为50个。 前提条件
自定义购买 本章节介绍如何在控制台通过自定义的方式购买集群实例。自定义的购买方式更加灵活,您不仅可以根据业务需要定制相应计算能力和存储空间的集群实例,而且可以在购买实例时进行一些高级配置,如:慢日志、自动备份等。 使用须知 每个租户下集群实例的默认总配额为10个。 前提条件 注册华为账号并开通华为云
自定义购买 本章节介绍如何在控制台通过自定义的方式购买副本集实例。自定义的购买方式更加灵活,您不仅可以根据业务需要定制相应计算能力和存储空间的副本集实例,而且可以在购买实例时进行一些高级配置,如:慢日志、自动备份等。 使用须知 每个租户下副本集实例的默认总配额为50个。 前提条件
自动清理 系统自动清理线程(autovacuum)包含VACUUM和ANALYZE两个过程,回收被标识为删除状态的记录空间,并更新表的统计数据。两次autovacuum的执行间隔时间由参数autovacuum_naptime控制,默认时间为10分钟,可根据实际业务场景进行配置。该间隔时间不能保证完全精确
WAIT_EVENT_INFO WAIT_EVENT_INFO视图显示wait event的具体信息,如表1、表2所示。 表1 WAIT_EVENT_INFO字段 名称 类型 描述 module text event所属的模块名。 type text event类型。 event
自动清理 系统自动清理线程(autovacuum)包含VACUUM和ANALYZE两个过程,回收被标识为删除状态的记录空间,并更新表的统计数据。两次autovacuum的执行间隔时间由参数autovacuum_naptime控制,默认时间为10分钟,可根据实际业务场景进行配置。该间隔时间不能保证完全精确
WAIT_EVENT_INFO WAIT_EVENT_INFO视图显示wait event的具体信息。 表1 WAIT_EVENT_INFO字段 名称 类型 描述 module text event所属的模块名。 type text event类型。 event text event