检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
支持客户进行MRS服务相关开源组件漏洞分析，如影响分析、修复建议，由用户负责评估对应的业务影响和进行最终实施。 不支持的服务 不负责提供具体MRS集群和开源大数据组件管理的运维操作，包括参数配置修改、重启、容量规划、组件性能优化以及集群上任何运维操作等。
TLSv1协议存在安全漏洞，请谨慎使用。
TLSv1协议存在安全漏洞，请谨慎使用。
配置Yarn大作业扫描 操作场景 Yarn大作业扫描功能主要用于监控Hive、HetuEngine、Spark等作业的本地临时文件（例如shuffle文件是否过大）、监控Hive、HetuEngine、Spark的关键HDFS目录（不支持OBS）是否过大。对于占用存储资源（本地磁盘或者关键
集群补丁升级 现网存量运行的MRS集群，如果有大数据组件社区重大问题或者漏洞，MRS将提供对集群打补丁能力，详情请参见MRS集群补丁说明。 版本约束 集群升级到新版本后，不支持回退到老版本。 普通版集群不支持升级。
TLSv1协议存在安全漏洞，请谨慎使用。 操作步骤 获取运行在Yarn上的任务的具体信息。
TLSv1协议存在安全漏洞，请谨慎使用。 操作步骤 获取运行在Yarn上的任务的具体信息。
例如，若curl仅支持TLSv1协议（TLSv1协议存在安全漏洞，请谨慎使用），修改方法如下： 登录FusionInsight Manager页面，单击“集群 > 待操作集群的名称 > 服务 > Spark2x > 配置 > 全部配置”。
SparkSQL访问Hive分区表启动Job前耗时较长如何处理？ 问题背景 使用SparkSql访问Hive的一个数据存放于OBS的一个分区表，但是运行速度却很慢，并且会大量调用OBS的查询接口。 SQL样例： select a,b,c from test where b=xxx
Hive分区修剪的谓词下推增强 操作场景 分区裁剪是一种优化技术，它通过在执行查询时仅扫描满足查询条件的分区，而不是扫描整个表的所有分区，来减少数据扫描量，从而提高查询性能。 在旧版本中，对Hive表的分区修剪的过滤条件（即谓词）下推，只支持列名与整数或者字符串的比较表达式的下推，
TLSv1协议存在安全漏洞，请谨慎使用。
TLSv1协议存在安全漏洞，请谨慎使用。
分布式Scan HBase表 场景说明 用户可以在Spark应用程序中使用HBaseContext的方式去操作HBase，使用hbaseRDD方法以特定的规则扫描HBase表。 数据规划 使用操作Avro格式数据章节中创建的HBase数据表。 开发思路 设置scan的规则，例如：setCaching
分布式Scan HBase表 场景说明 用户可以在Spark应用程序中使用HBaseContext的方式去操作HBase，使用hbaseRDD方法以特定的规则扫描HBase表。 数据规划 使用操作Avro格式数据章节中创建的HBase数据表。 开发思路 设置scan的规则，例如：setCaching
配置MapReduce通过IAM委托访问OBS 参考配置MRS集群通过IAM委托对接OBS完成存算分离集群配置后，如果需要实现JobHistory及时清理用户目录下的日志文件，需参考本章节新增Mapreduce自定义配置。 MapReduce对接OBS 登录MRS管理控制台，单击集群名称进入集群详情页面
分布式Scan HBase表 场景说明 用户可以在Spark应用程序中使用HBaseContext的方式去操作HBase，使用hbaseRDD方法以特定的规则扫描HBase表。 数据规划 使用操作Avro格式数据章节中创建的hbase数据表。 开发思路 设置scan的规则，例如：setCaching
分布式Scan HBase表 场景说明 用户可以在Spark应用程序中使用HBaseContext的方式去操作HBase，使用hbaseRDD方法以特定的规则扫描HBase表。 数据规划 使用操作Avro格式数据章节中创建的hbase数据表。 开发思路 设置scan的规则，例如：setCaching
建立Hive表分区提升查询效率 操作场景 Hive在做Select查询时，一般会扫描整个表内容，会消耗较多时间去扫描不关注的数据。此时，可根据业务需求及其查询维度，建立合理的表分区，从而提高查询效率。 操作步骤 以root用户登录已安装Hive客户端的节点。 执行以下命令，进入客户端安装目录
TLSv1协议存在安全漏洞，请谨慎使用。
建立Hive表分区提升查询效率 操作场景 Hive在做Select查询时，一般会扫描整个表内容，会消耗较多时间去扫描不关注的数据。此时，可根据业务需求及其查询维度，建立合理的表分区，从而提高查询效率。 操作步骤 MRS 3.x之前版本： 登录MRS控制台，在左侧导航栏选择“现有集群
