MapReduce服务 MRS-MRS存算分离配置流程说明:基于Guardian服务的存算分离配置流程
基于Guardian服务的存算分离配置流程
- 创建 MRS 集群。
MRS集群内需包含Guardian、Ranger、Hadoop等基础组件。
目前仅MRS 3.3.0-LTS及之后的版本支持基于Guardian组件对接OBS。
- 创建OBS委托。
- 开启Guardian组件对接OBS开关并配置组件。
修改Guardian服务相关配置参数,配置 IAM 委托认证信息。
- 配置组件数据回收站目录的清理策略。
在存算分离场景下,对接OBS的组件默认开启了数据防误删功能,用户删除数据时,被删除对象会移动至用户对应的回收站目录内,用户需要在OBS文件系统中为对应的目录配置生命周期策略,以避免存储空间被占满的风险。
- 组件对接OBS。
- 在具备OBS资源的访问权限后,MRS集群内组件可直接访问对应路径。用户可以通过组件客户端以绝对路径方式直接访问OBS文件系统下的资源。