PGXC_OBS_IO_SCHEDULER_STATS PGXC_OBS_IO_SCHEDULER_STATS视图显示OBS IO Scheduler读/写请求相关的近期实时统计信息。该系统视图仅9.1.0及以上版本支持。
从OBS导入ORC、CARBONDATA、PARQUET和JSON数据 OBS上的数据准备 创建外部服务器 创建外表 通过外表查询OBS上的数据 清除资源 支持的数据类型 父主题: 从OBS并行导入数据
CREATE FOREIGN TABLE (OBS导入导出) 功能描述 在当前数据库创建一个OBS外表,用于OBS数据并行导入导出。该方式不需要用户再额外创建外部服务器server,使用数据库默认创建的gsmpp_server即可。
CREATE FOREIGN TABLE (OBS导入导出) 功能描述 在当前数据库创建一个OBS外表,用于OBS数据并行导入导出。该方式不需要用户再额外创建外部服务器server,使用数据库默认创建的gsmpp_server即可。
示例 单表导出操作步骤 通过创建外表,将数据库中的单表导出至OBS的两个桶中。 用户通过管理控制台登录到OBS数据服务器。
规划导出数据 OBS导出数据准备:请参见规划导出数据完成OBS导出数据准备。 OBS导出支持的数据类型请参见表1。
创建外部服务器 本章节包含创建OBS外部服务器和创建HDFS外部服务器。 创建OBS外部服务器,用于定义OBS服务器的信息,供外表调用,针对集群不同版本,创建方式不同。具体操作步骤请参见创建外部服务器。
PGXC_OBS_IO_SCHEDULER_PERIODIC_STATS PGXC_OBS_IO_SCHEDULER_PERIODIC_STATS视图统计了OBS IO Scheduler不同请求类型(包括读/写/文件操作)下的请求数量、流控信息等内容。
PGXC_OBS_IO_SCHEDULER_PERIODIC_STATS PGXC_OBS_IO_SCHEDULER_PERIODIC_STATS视图统计了OBS IO Scheduler不同请求类型(包括读/写/文件操作)下的请求数量、流控信息等内容。
OBS的数据导入性能,多数场景受限于网络的并发访问速率,因此在OBS服务器上最好部署多个桶,使用多桶并发导入,提高DN数据传输利用率。 并发导入场景,与单表导入相似,至少应保证I/O性能大于网络最大速率。
父主题: 从OBS导入CSV、TXT数据
父主题: 导出CSV、TXT数据到OBS
父主题: 导出ORC和PARQUET数据到OBS
父主题: 从OBS导入CSV、TXT数据
1 DROP FOREIGN TABLE product_info_ext_obs; 当结果显示为如下信息,则表示删除成功。 1 DROP FOREIGN TABLE 删除创建的外部服务器 使用创建外部服务器的用户连接到外部服务器所在的数据库。
通过OBS外表导出数据时,执行导出操作的用户必须具备数据导出路径所在的OBS桶和对象的读取和写入权限。 有关配置OBS权限的具体操作,请参见《对象存储服务控制台指南》中的配置桶ACL和“配置对象ACL”章节。 父主题: 数据导入/导出
父主题: 从OBS导入ORC、CARBONDATA、PARQUET和JSON数据
DWS的OBS外表与GDS外表支持的数据格式有什么区别? OBS与GDS外表支持格式文件区别如下: OBS导入支持ORC、TEXT、JSON、CSV、CARBONDATA、PARQUET文件格式,导出支持ORC、CSV、TEXT、PARQUET文件格式,缺省值为TEXT。
普通用户创建或删除GDS/OBS外表语句时报错,提示没有权限或权限不足 问题现象 创建GDS或OBS外表语句时,管理员用户可以执行成功,但普通用户执行时报错“ERROR: permission denied to create foreign table in security mode
如果需要查询OBS、GDS等外表信息(如OBS路径),可以执行以下语句查询。