MapReduce服务 MRS-调整高级特性MDE FOR GaussDB:操作场景

时间:2023-11-01 16:25:29

操作场景

GaussDB MDE特性是指在使用HetuEngine服务向GaussDB写入数据时(CTS和ITS语法),解除数据仅通过GaussDB的Coordinator流通的限制,使数据也可通过GaussDB的Worker节点流入GaussDB,减少GaussDB的Coordinator节点压力,并提升数据写入性能。

GaussDB MDE特性需要借助GaussDB的SQL On Hadoop能力,使用外部服务器作为数据传递的载体。HetuEngine目前仅支持使用HDFS外部服务器,并且该HDFS外部服务器需与HetuEngine服务在同一个Hadoop集群。

使用HetuEngine执行SQL向GaussDB写入数据,当前仅支持以下两类语法可通过GaussDB MDE特性进行性能提升:

  • CREATE TABLE AS SELECT FROM hive
  • INSERT INTO SELECT FROM hive
  • 当前仅支持GaussDB(DWS) 8.0.0及以后版本
support.huaweicloud.com/cmpntguide-lts-mrs/mrs_01_24489.html