MAPREDUCE服务 MRS-未安装HBase时Hive on Spark任务卡顿处理:操作场景

时间:2024-04-10 09:06:37

操作场景

此功能适用于Hive组件。

按如下操作步骤设置参数后,在未安装HBase的环境执行Hive on Spark任务时,可避免任务卡顿。

Hive on Spark任务的Spark内核版本已经升级到Spark2x,可以支持在不安装Spark2x的情况下,执行Hive on Spark任务。如果没有安装HBase,默认在执行Spark任务时,会尝试去连接Zookeeper访问HBase,直到超时,这样会造成任务卡顿。

在未安装HBase的环境,要执行Hive on Spark任务,可以按如下操作处理。如果是从已有HBase低版本环境升级上来的,升级完成之后可不进行设置。

support.huaweicloud.com/cmpntguide-lts-mrs/mrs_01_1760.html