检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
查询已授权给LakeFormation服务的obs路径列表 功能介绍 查询已授权给LakeFormation服务的obs路径列表 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。
向LakeFormation服务授权OBS路径 功能介绍 将OBS路径授权给LakeFormation服务,LakeFormation服务对于已授权的OBS路径具有读写权限 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。
从LakeFormation服务中批量取消授权OBS路径 功能介绍 从LakeFormation服务中批量取消授权OBS路径,已经有元数据使用的OBS路径无法取消授权 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。
父主题: OBS管理
OBS管理 查询OBS桶列表 查询OBS桶对象列表 父主题: Console
表2 Query参数 参数 是否必选 参数类型 描述 bucket_type 否 String PFS:并行文件系统、 OBJECT:对象存储桶。 offset 否 Integer 分页查询时的偏移量。默认值为0。最小值为1,最大值为1000。
配置完成后,系统将在OBS中为您使用的OBS桶创建一条名为“lakeformation_trash_lifecycle”的生命周期规则。
如果已存在可用的OBS对象桶或OBS并行文件系统,可跳过该章节操作。以下操作以创建OBS并行文件系统路径为例进行说明。 操作步骤 登录管理控制台。 在页面左上角单击,选择“存储 > 对象存储服务”,进入对象存储服务页面。
对接OBS后,如需通过Ranger配置组件关于OBS相关路径的权限策略,需确保OBS服务已开启AccessLabel功能,若未开启,需手动开启,详细操作请联系OBS服务运维人员。 fs.obs.guardian.enabled true 是否开启使用Guardian。
500 00011110 创建OBS桶失败。 请检查是否支持OBS服务、OBS服务权限是否正确或联系运维人员。 500 00011111 OBS写入数据失败。 请检查是否支持OBS服务、OBS服务权限是否正确或联系运维人员。 500 00011112 OBS更新任务信息失败。
可以在列表上方“OBS授权路径”、“授权主体”、“主体类型”、“主体来源”中搜索待查看权限的对应信息。 “OBS授权路径”仅支持查找授权对象为OBS路径的权限策略。 在列表中查看数据授权信息。
其中位置是Catalog所映射的OBS桶的文件目录。
当前用户具有OBS相关操作权限,且已创建用于存储数据的OBS并行文件系统。 需将待迁移的权限策略文件导出,并上传至OBS并行文件系统中。权限导出操作可联系对应服务支持人员。 权限策略中授权主体(除角色外)需要提前创建,且名称需保持一致;权限策略中包含的元数据已存在,且名称一致。
服务接入点 配置待迁移元数据服务接入点。 “数据源类型”为“DLF”时配置该参数。 Access Key/Secret Key AK/SK信息,请联系DLF服务运维人员获取。“数据源类型”为“DLF”时配置该参数。 源Catalog 待迁移元数据所属Catalog名称。
选择位置 数据库信息存储在OBS桶中的位置。 单击“”,根据实际需要选择“并行文件系统”或“对象存储桶”,并选择位置后,单击“确定”。
表15 PermissionMigrationParameter 参数 参数类型 描述 migrate_existing_obs_acl Boolean 是否进行存量OBS路径权限迁移 location String 用于获取权限迁移的obs文件路径。
元数据约束限制 表3 元数据约束说明 限制项 说明 数据存储 LakeFormation依赖OBS服务,OBS需要基于大数据存算分离场景进行分离部署;LakeFormation元数据的存储位置对应OBS路径,与存算分离架构的MRS等大数据集群对接。
请求示例 GET https://{endpoint}/v1/{project_id}/instances/{instance_id}/lf-jobs/{job_id}/history 响应示例 状态码:200 查询任务列表成功 { "total" : 1, "jobs"
URI POST /v1/{project_id}/instances/{instance_id}/lf-jobs/{job_id}/stop 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目编号。获取方法,请参见获取项目ID。
表15 PermissionMigrationParameter 参数 参数类型 描述 migrate_existing_obs_acl Boolean 是否进行存量OBS路径权限迁移 location String 用于获取权限迁移的obs文件路径。