jar包:https://github.com/huaweicloud/obsa-hdfs/blob/master/release/hadoop-huaweicloud-3.1.1-hw-53.8.jar pom文件:https://github.com/huaweicloud/obsa-hdfs
在存算分离架构基础上提供数据湖元数据统一管理的可视化界面及API,兼容Hive元数据模型以及Ranger权限模型,支持对接MapReduce服务(MRS)、数据仓库服务 GaussDB(DWS)、数据湖探索(DLI)、AI开发平台ModelArts、数据治理中心 DataArts
例如obs://location/uri/。 compressed Boolean 是否启用数据压缩。默认为false。 input_format String 输入格式。 output_format String 输出格式。
LakeFormation服务分为一期和二期,一期响应Body无该参数。 class_name String 函数类名。 create_time String 创建时间格式为yyyy-mm-ddThh:mm:sss。
例如obs://location/uri/。 compressed Boolean 是否启用数据压缩。默认为false。 input_format String 输入格式。 output_format String 输出格式。
例如obs://location/uri/。 compressed Boolean 是否启用数据压缩。默认为false。 input_format String 输入格式。 output_format String 输出格式。
目录管理 列举Catalog信息 获取Catalog信息 创建Catalog 修改Catalog信息 删除Catalog对象 父主题: LakeCat
更新管理 SSL证书采用SSL协议进行通信,SSL证书部署到服务器后,服务器端的访问将启用HTTPS协议。您的网站将会通过HTTPS加密协议来传输数据,可帮助服务器端和客户端之间建立加密链接,从而保证数据传输的安全。
约束与限制 如果其他服务已对接LakeFormation实例,且没有指定具体的LakeFormation实例ID,变更默认实例后,可能对使用LakeFormation的周边服务产生影响,请谨慎操作。 设置默认实例 登录LakeFormation管理控制台。
支持创建接入管理客户端,与MRS等云服务对接。 支持元数据、权限迁移至LakeFormation。 支持管理元数据生命周期。 公测 LakeFormation使用流程简介
例如obs://location/uri/。 compressed Boolean 是否启用数据压缩。默认为false。 input_format String 输入格式。 output_format String 输出格式。
例如obs://location/uri/。 compressed Boolean 是否启用数据压缩。默认为false。 input_format String 输入格式。 output_format String 输出格式。
规划LakeFormation元数据 创建LakeFormation元数据存储路径 创建LakeFormation元数据 配置LakeFormation元数据权限
自定义认证信息获取类 认证信息获取类(IdentityGenerator)用于获取访问LakeFormation服务的IAM认证信息(Token、永久AK/SK,临时AK/SK+securityToken)。
自定义认证信息获取类 认证信息获取类(IdentityGenerator)用于获取访问LakeFormation服务的IAM认证信息(Token、永久AK/SK,临时AK/SK+securityToken)。
例如obs://location/uri/。 compressed Boolean 是否启用数据压缩。默认为false。 input_format String 输入格式。 output_format String 输出格式。
LakeFormation服务分为一期和二期,一期响应Body无该参数。 class_name String 函数类名。 create_time String 创建时间格式为yyyy-mm-ddThh:mm:sss。
LakeFormation服务的其它功能。
虚拟私有云 待接入服务所在的虚拟私有云。 所属子网 待接入服务所在的子网。 单击“操作”列“查看详情”,打开详细信息页面。 在详情页可以查看ID、客户端名称、状态、接入模式、虚拟私有云、所属子网、终端节点ID、接入IP等信息。
例如obs://location/uri/。 compressed Boolean 是否启用数据压缩。默认为false。 input_format String 输入格式。 output_format String 输出格式。