检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
添加OBS的Ranger访问权限策略 操作场景 Ranger管理员可以通过Ranger为OBS用户配置OBS目录或文件的读、写权限。 本章节仅适用于MRS 3.3.0-LTS及之后版本。 前提条件 已安装Ranger服务且服务运行正常。 已创建需要配置权限的用户组。
典型场景：从关系型数据库导入数据到HDFS/OBS 操作场景 该任务指导用户使用Loader将数据从关系型数据库导入到HDFS/OBS。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS/OBS目录和数据。
使用hive-table方式同步数据到obs上的hive表报错 问题 使用hive-table方式同步数据到obs上的hive表报错。 回答 修改数据同步方式，将-hive-table改成-hcatalog-table。 父主题： Sqoop常见问题
为什么在Hive自定义配置中添加OBS快删目录后不生效 问题 在配置MRS多用户访问OBS细粒度权限的场景中，在Hive自定义配置中添加OBS快删目录的配置后，删除Hive表。 执行结果为成功，但是OBS目录没有删掉。
MRS服务如何对接云日志服务？ 前提条件 已获取账号AK和SK，详情请参考：如何获取访问密钥AK/SK。 操作步骤 在MRS主机上安装ICAgent，详情请参考：安装ICAgent（华为云主机）。 首次安装先安装一台服务器，然后按照继承批量安装的方式安装其他所有主机。
进入实例页面查看JobServer或JobBalancer全部实例是否故障或未启动，并查看故障或未启动实例所在节点的主机名。 在FusionInsight Manager的“告警”页面，查看是否有“NodeAgent进程异常”告警产生。 是，执行3。 否，执行6。
原理介绍 OBS对象存储是支持海量数据存储，并提供安全可靠的、低成本的分布式存储服务，ClickHouse基于OBS的优势构建冷热分离存储架构。
处理步骤 登录FusionInsight Manager，选择“集群 > 服务 > JobGateway ”。 选择“实例”页签，单击“添加实例”，根据用户实际作业提交量，新增JobServer实例数量。 实例添加完成后，重启JobGateway服务。
表1 obs-connector配置 参数 说明 名称 指定一个Loader连接的名称。 OBS服务器 输入OBS endpoint地址，一般格式为OBS.Region.DomainName。
Current 回答 登录Manager页面，选择“集群 > 服务 > Hive > 配置 > 全部配置 > MetaStore（角色）> 自定义”，在自定义配置项“hive.metastore.customized.configs”中添加参数“fs.obs.hdfs.trash.version
MRS支持将创建集群失败的日志转储到OBS，便于运维人员获取日志进行分析。 MRS具有开放的生态，支持无缝对接周边服务，快速构建统一大数据平台。
选择“集群 > 待操作集群的名称 > 服务 > Yarn > 停止服务”，停止Yarn服务。 以root用户登录到安装Yarn服务的各个节点中，执行如下操作。 创建目标目录。
对系统的影响 更改Broker角色的存储目录需要重新启动服务，服务重启时无法访问。 更改Broker单个实例的存储目录需要重新启动实例，该节点Broker实例重启时无法提供服务。 服务参数配置如果使用旧的存储目录，需要更新为新目录。
选择“集群 > 待操作集群的名称 > 服务 > Yarn > 停止服务”，停止Yarn服务。 以root用户登录到安装Yarn服务的各个节点中，执行如下操作。 创建目标目录。
Alluxio主要特点如下： 提供内存级I/O 吞吐率，同时降低具有弹性扩张特性的数据驱动型应用的成本开销 简化云存储和对象存储接入 简化数据管理，提供对多数据源的单点访问 应用程序部署简易 Alluxio 接口开发简介 Alluxio支持使用Java进行程序开发，具体的API接口内容请参考
使用LZC压缩算法存储HDFS文件 配置场景 文件压缩可以减少储存文件的空间，并且提高数据从磁盘读取和网络传输的速度。HDFS有Gzip和Snappy这两种默认压缩格式。本章节为HDFS新增加的压缩格式LZC（Lempel-Ziv Compression）提供配置方法。这种压缩格式增强了
使用LZC压缩算法存储HDFS文件 配置场景 文件压缩可以减少储存文件的空间，并且提高数据从磁盘读取和网络传输的速度。HDFS有Gzip和Snappy这两种默认压缩格式。本章节为HDFS新增加的压缩格式LZC（Lempel-Ziv Compression）提供配置方法。这种压缩格式增强了
在“服务状态”详情页面，选择“更多 > 重启服务”，单击“确定”重启Hive服务。 若未同步IAM用户，需在集群详情页的“概览”页签，单击“IAM用户同步”右侧的“同步”进行IAM用户同步再重启Hive服务。
使用Loader从HDFS/OBS导出数据到关系型数据库 操作场景 该任务指导用户使用Loader将数据从HDFS/OBS导出到关系型数据库。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业执行时操作的HDFS/OBS目录和数据。
MRS支持什么类型的分布式存储？ 提供目前主流的Hadoop，目前支持Hadoop 3.1.x版本，并且随社区更新版本。MRS支持的组件版本请参考表1。 更多信息请参见MRS组件版本一览表。 表1 MRS组件版本信息 MRS支持的组件 MRS 1.9.2（适用于MRS 1.9.x）
