检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据倾斜调优 数据倾斜问题是分布式架构的重要难题,它破坏了MPP架构中各个节点对等的要求,导致单节点(倾斜节点)所存储或者计算的数据量远大于其他节点,所以会造成以下危害: 存储上的倾斜会严重限制系统容量,在系统容量不饱和的情况下,由于单节点倾斜的限制,使得整个系统容量无法继续增长。
数据倾斜调优 数据倾斜问题是分布式架构的重要难题,它破坏了MPP架构中各个节点对等的要求,导致单节点(倾斜节点)所存储或者计算的数据量远大于其他节点,所以会造成以下危害: 存储上的倾斜会严重限制系统容量,在系统容量不饱和的情况下,由于单节点倾斜的限制,使得整个系统容量无法继续增长。
创建GDS外表 外表中配置了数据源格式信息、GDS服务的访问信息,从而GaussDB(DWS)最终可以通过外表将数据服务器上的数据引流进数据库实表中。 操作步骤 收集数据源格式信息、GDS服务的访问信息。 需要收集的主要数据源格式信息如下: format:GDS外表导入支持CSV、
数据库、数据仓库、数据湖、湖仓一体分别是什么? 如今随着互联网以及物联网等技术的不断发展,越来越多的数据被生产出来,数据管理工具也得到了飞速的发展,大数据相关概念如雨后春笋一般应运而生,如数据库、数据仓库、数据湖、湖仓一体等。这些概念分别指的是什么,又有着怎样的联系,同时,对应的产品与方案又是什么呢
例行维护表 为了保证数据库的有效运行,数据库必须在插入/删除操作后,定期执行VACUUM FULL和ANALYZE,更新统计信息,以便获得更优的性能。 相关概念 使用VACUUM、VACUUM FULL和ANALYZE命令定期对每个表进行维护,主要有以下原因: VACUUM FULL
变更计费模式概述 在创建GaussDB(DWS)后,如果发现当前计费模式无法满足业务需求,您可以变更计费模式。支持变更计费模式的GaussDB(DWS)计费项如下所示: 表1 支持变更计费模式的GaussDB(DWS)计费项 计费项 变更说明 相关文档 数据仓库节点 变更节点规格的计费模式
例行维护表 为了保证数据库的有效运行,数据库必须在插入/删除操作后,定期执行VACUUM FULL和ANALYZE,更新统计信息,以便获得更优的性能。 相关概念 使用VACUUM、VACUUM FULL和ANALYZE命令定期对每个表进行维护,主要有以下原因: VACUUM FULL
例行维护表 为了保证数据库的有效运行,数据库必须在插入/删除操作后,基于客户场景,定期做VACUUM FULL和ANALYZE,更新统计信息,以便获得更优的性能。 相关概念 使用VACUUM、VACUUM FULL和ANALYZE命令定期对每个表进行维护,主要有以下原因: VACUUM
查看GaussDB(DWS)集群拓扑图 概述 集群拓扑图向用户展示了集群内所有节点的拓扑结构,方便用户查看节点状态、节点进程、节点IP地址等信息。 集群拓扑图分为拓扑结构展示与节点进程展示两个功能。 拓扑结构节点展示仅8.0.0及以上集群版本支持,节点进程展示仅8.2.0及以上集群版本支持
结构匹配查询重写 结构匹配查询重写不要求查询语句与物化视图定义完全一致,只要求查询语句的结果能够通过物化视图的结果改写得到,通过添加投影列、过滤条件、聚集列、排序列以及limit的方式,使重写后的结果与原始查询语句的结果一致。 GaussDB(DWS)支持四种结果匹配查询重写:条件重写
与其他云服务的关系 与统一身份认证服务的关系 数据仓库服务使用统一身份认证服务(Identity and Access Management,简称IAM)实现认证和鉴权功能。 需要拥有DWS Administrator权限的用户才能完整使用数据仓库服务。如需开通该权限,请联系拥有Security
计费项 计费说明 华为云GaussDB(DWS)根据您选择的数据仓库节点规格及使用的相关资源进行计费。具体内容如表1所示。如您需快速了解GaussDB(DWS)服务的具体价格,请参见GaussDB(DWS)价格详情。 表1 GaussDB(DWS)计费项说明 计费项 计费说明 适用的计费模式
产品功能 GaussDB(DWS)为用户提供GaussDB(DWS)管理控制台、GaussDB(DWS)客户端、REST API等多样化的使用方式。本章节为您介绍GaussDB(DWS)的主要功能。 企业级数据仓库和标准SQL的支持 当创建好GaussDB(DWS)集群后,用户就可以使用
使用Kettle迁移AWS Redshift小表到DWS集群 本实践演示如何使用开源工具Kettle将Redshift数据迁移到GaussDB(DWS)。 了解Kettle Kettle是一个开源的ETL(Extract-Transform-Load)工具,全称为KDE Extraction
使用集群前必读:性能管理要求 GaussDB(DWS)数据库系统的性能管理在整个系统中起着很关键的作用,为了避免集群频繁出现资源(CPU、I/O、内存、磁盘空间等)过载情况,需要对集群内的业务和整体资源进行设限和管控,并定期进行主动运维,提前进行扩容规划等。 例如,在新业务上线前,
其他优化器选项 default_statistics_target 参数说明:为没有用ALTER TABLE SET STATISTICS设置字段目标的表设置缺省统计目标。此参数设置为正数是代表统计信息的样本数量,为负数时,代表使用百分比的形式设置统计目标,负数转换为对应的百分比,
其他优化器选项 default_statistics_target 参数说明:为没有用ALTER TABLE SET STATISTICS设置字段目标的表设置缺省统计目标。此参数设置为正数是代表统计信息的样本数量,为负数时,代表使用百分比的形式设置统计目标,负数转换为对应的百分比,
SQL执行计划 SQL执行计划是一个节点树,显示GaussDB(DWS)执行一条SQL语句时执行的详细步骤。每一个步骤为一个数据库运算符,也叫作一个执行算子。 使用EXPLAIN命令可以查看优化器为每个查询生成的具体执行计划。EXPLAIN给每个执行节点都输出一行,显示基本的节点类型和优化器为执行这个节点预计的开销值
VACUUM 功能描述 VACUUM回收表或B-Tree索引中已经删除的行所占据的存储空间。在一般的数据库操作里,那些已经DELETE的行并没有从它们所属的表中物理删除;在完成VACUUM之前它们仍然存在。因此有必要周期地运行VACUUM,特别是在经常更新的表上。 VACUUM与VACUUM
VACUUM 功能描述 VACUUM回收表或B-Tree索引中已经删除的行所占据的存储空间。在一般的数据库操作里,那些已经DELETE的行并没有从它们所属的表中物理删除;在完成VACUUM之前它们仍然存在。因此有必要周期地运行VACUUM,特别是在经常更新的表上。 VACUUM与VACUUM