数据仓库服务 GAUSSDB(DWS)-跨集群访问HiveMetaStore:约束与限制

时间:2024-05-21 17:09:43

约束与限制

  • 目前仅支持对接EXTERNAL SCHEMA对应的Hive端数据库的表进行SELECT、INSERT和INSERT OVERWRITE操作,其余操作均不支持。
  • MRS端两种数据源对应格式支持的操作参见表1
    表1 MRS端两种数据源支持的操作

    数据源

    表类型

    操作

    TEXT

    CSV

    PARQUET

    ORC

    HDFS

    非分区表

    SELECT

    INSERT/INSERT OVERWRITE

    x

    x

    x

    分区表

    SELECT

    INSERT/INSERT OVERWRITE

    x

    x

    x

    OBS

    非分区表

    SELECT

    INSERT/INSERT OVERWRITE

    x

    x

    x

    分区表

    SELECT

    x

    x

    INSERT/INSERT OVERWRITE

    x

    x

    x

    x

  • 不再保证事务原子性,事务失败后,不再保证数据一致性;不支持回滚。
  • 不支持通过EXTERNAL SCHEMA对hive端创建的表进行GRANT和REVOKE操作。
  • 并发支持:DWS、HIVE、SPARK并发读写,会出现脏读问题;对同一张非分区表或者同一张分区表的同一个分区执行包含INSERT OVERWRITE相关的并发操作无法保证预期结果,请不要执行此类操作。
  • HiveMetaStore特性不支持联邦机制。
support.huaweicloud.com/devg-dws-v3/dws_16_0035.html