使用HetuEngine物化视图-华为云

MAPREDUCE服务 MRS-配置物化视图改写能力:物化视图改写能力支持范围

物化视图改写能力支持范围物化视图支持的类型 BOOLEAN、DECIMAL、DOUBLE、REAL/FLOAT、INT、BIGINT、SMALLINT、TINYINT、CHAR/VARCHAR、DATE、TIME、TIMESTAMP、INTERVAL YEAR TO MONTH、INTERVAL DAY TO SECOND、BINARY/VARBINARY、UUID。物化视图改写支持的函数转换函数：只支持CAST函数。字符串函数：支持所有字符串函数，包括char_length、character_length、chr、codepoint、decode、encode、find_in_set、format_number、locate、hamming_distance、instr、levenshtein、levenshtein_distance、ltrim、lpad、octet_length、position、quote、repeat2。数学运算符：支持所有数学运算符。聚合函数：支持的聚合函数包括 COUNT、SUM、MIN、MAX、AVG、LEAD、LAG、FIRST_VALUE、LAST_VALUE、COVAR_POP、COVAR_SAMP、REGR_SXX、REGR_SYY、STDDEV_POP、STDDEV_SAMP、VAR_POP、VAR_SAMP、ROW_NUMBER、RANK、PERCENT_RANK、DENSE_RANK、CUME_DIST。以下场景，物化视图不支持对包含了函数的SQL查询进行改写： SQL中包含无参函数 SQL中包含了HetuEngine支持的会根据参数的类型获得不同类型的返回值的函数 SQL中函数存在嵌套使用，或者是使用的函数会发生异常导致重写失败的函数物化视图创建语句改写不支持二段式表名，支持一段式和三段式表名。如支持改写表名为“hive.mvschema.t1”和“t1”，不支持改写表名为“mvschema.t1”。

MAPREDUCE服务 MRS 使用HetuEngine物化视图

MAPREDUCE服务 MRS-物化视图概述:使用介绍

使用介绍表2 物化视图使用介绍阶段说明参考章节物化视图SQL示例介绍物化视图支持的操作，包括创建物化视图、列举物化视图、查询物化视图等物化视图SQL示例配置物化视图改写能力开启物化视图能力，提高查询的响应效率配置物化视图改写能力配置物化视图推荐能力自动学习并推荐对业务最有价值的物化视图SQL，使在线查询效率获得倍数提升，同时有效降低系统负载压力配置物化视图推荐能力配置物化视图缓存能力可将多次执行并改写后的SQL保存到缓存中，再次执行这条SQL时会直接从缓存中获取改写后的SQL，而不是重新对SQL进行改写，提高查询效率配置物化视图缓存能力配置物化视图有效期与数据刷新设置物化视图的有效期，当前系统只会使用有效期内的物化视图进行自动改写设置数据定期更新，可定时手动刷新或自动刷新物化视图配置物化视图的有效期与数据刷新能力配置智能物化视图提供自动化物化视图的创建，无需手动执行SQL创建物化视图（推荐使用）配置智能物化视图能力查看物化视图自动化任务记录看任务执行情况，帮助评估集群运行健康状况查看物化视图自动化任务

MAPREDUCE服务 MRS 使用HetuEngine物化视图

MAPREDUCE服务 MRS-物化视图概述:背景介绍

背景介绍 HetuEngine具备物化视图能力。在实际运用中，将高频访问的SQL查询和有高耗时的算子（连接，聚合等算子）的SQL通过建立物化视图进行预计算，然后在查询的SQL中将能匹配到物化视图的查询或者子查询转换为物化视图，避免了数据的重复计算，这种情况下往往能较大地提高查询的响应效率。物化视图通常基于对数据表进行聚合和连接的查询结果创建。物化视图支持“查询重写”，这是一种优化技术，即将基于原始表编写的查询语句转换为查询一个或多个物化视图语句的等效请求。如下物化视图的SQL示例： create materialized view mv.default.mv1 with(storage_table='hive.default.mv1') AS select id from hive.mvschema.t1; 该物化视图实际数据的存储表为“hive.default.mv1”，在查询重写时，查询SQL“select id from hive.mvschema.t1”会被重写成查询物化视图的表，即“select id from hive.default.mv1”。

MAPREDUCE服务 MRS 使用HetuEngine物化视图

MAPREDUCE服务 MRS-物化视图概述:权限介绍

权限介绍物化视图权限如表1。物化视图权限控制依赖Ranger，如果关闭Ranger鉴权会带来权限失效的风险。表1 HetuEngine物化视图权限介绍操作 catalog mv权限物化视图存储表的权限原始物理表的权限创建物化视图建表权限 NA 对应列的查询权限删除物化视图删除表权限 NA NA 刷新物化视图表的更新权限 NA 对应列的查询权限使用物化视图重写查询语句 NA NA 对应列的查询权限使用物化视图重写查询语句的执行计划（EXPLAIN） NA 对应列的查询权限对应列的查询权限查询物化视图对应列的查询权限 NA NA 物化视图和非物化视图的物理表联合查询对应列的查询权限 NA 对应列的查询权限查看物化视图 NA NA NA 查看物化视图的创建语句表的Show权限表的Show权限 NA

MAPREDUCE服务 MRS 使用HetuEngine物化视图

云服务器内容精选

使用HetuEngine物化视图

7*24

备案

专业服务

退订

建议反馈

售前咨询热线