视频帮助 - 湖仓构建 LakeFormation
None 操作指导 创建LakeFormation实例 02:31 在管理控制台创建LakeFormation实例 创建LakeFormation元数据并授权 06:36 为LakeFormation实例创建元数据并授权
资产识别与管理 - 湖仓构建 LakeFormation
资产识别与管理 资产识别 资产信息:元数据信息、数据权限策略信息。 账号信息:不涉及,用户在LakeFormation不感知具体账号信息。 API映射表:请参见API参考。
审计与日志 - 湖仓构建 LakeFormation
审计与日志 云审计服务(Cloud Trace Service,简称CTS),是华为云安全解决方案中专业的日志审计服务,提供对各种云资源操作记录的收集、存储和查询功能,可用于支撑安全分析、合规审计、资源跟踪、问题回溯和问题定位等常见应用场景。
身份认证与访问控制 - 湖仓构建 LakeFormation
LakeFormation针对界面下发的HTTPS请求中IAM Token进行认证,识别出租户、IAM用户等身份。认证失败则拒绝请求。 Console界面其他租户IAM用户切换到本租户的委托角色来访问LakeFormation。
数据表统计 - 湖仓构建 LakeFormation
数据表统计 获取表的列统计信息 - ListTableColumnStatistics 更新表的列统计信息 - SetTableColumnStatistics 删除表的指定列统计信息 - DeleteTableColumnStatistics 父主题: LakeCat类API
如何获取LakeFormation实例ID - 湖仓构建 LakeFormation
如何获取LakeFormation实例ID 登录LakeFormation管理控制台。 在左侧下拉框中选择待操作的LakeFormation实例。 在实例的“基本信息”中查看“实例ID”参数值,即为当前实例的ID。 父主题: 实例管理类
环境准备 - 湖仓构建 LakeFormation
环境准备 简介 准备LakeFormation实例 创建客户端 修改DNS信息
元数据恢复 - 湖仓构建 LakeFormation
元数据恢复 恢复元数据 - RestoreMetadata 恢复表数据 - RestoreTableData 父主题: LakeCat类API
迁移元数据至LakeFormation - 湖仓构建 LakeFormation
日志中常见报错信息及对应原因请见运行日志常见报错分析。 运行日志常见报错分析 表2 日志中常见报错 日志报错信息 报错原因 Invalid input parameter 元数据的入参非法,或者LakeFormation暂时不支持此类元数据。
多服务/多集群共享元数据 - 湖仓构建 LakeFormation
在为集群1、集群2配置对接LakeFormation并授予相关操作权限后,集群2的业务用户可通过LakeFormation的统一元数据管理,查询数据表T1的数据并进行分析。 图1 跨集群数据共享 跨服务、跨集群数据共享 LakeFormation支持跨服务、跨集群数据共享。
配置LakeFormation对接开源Spark组件 - 湖仓构建 LakeFormation
配置LakeFormation对接开源Spark组件 对接开源Spark前准备 配置LakeFormation对接Spark 对接开源Spark后二次开发
创建LakeFormation实例 - 湖仓构建 LakeFormation
操作视频 本视频以创建一个独享型、按需计费的LakeFormation实例为例进行说明。 因不同版本操作界面可能存在差异,相关视频供参考,具体以实际环境为准。 操作步骤 登录LakeFormation管理控制台。 单击总览页面右上角“立即购买”或“购买实例”,进入购买实例页面。
服务授权管理 - 湖仓构建 LakeFormation
服务授权管理 接入服务授权 - AuthorizeAccessService 查询租户当前的接入服务授权 - ShowAccessService 注册租户协议 - CreateAgreementV2 查询租户是否注册协议 - ShowAgreementV2 删除租户协议 - DeleteAgreementV2
授权管理 - 湖仓构建 LakeFormation
授权管理 批量授权 - BatchAuthorizeInterface 获取同步权限策略 - ShowSyncPolicy 取消批量授权 - BatchCancelAuthorizationInterface 查询策略 - ListInterfaces 批量鉴权 - BatchCheckPermission
元数据迁移类 - 湖仓构建 LakeFormation
元数据迁移类 迁移元数据任务运行成功,仅删除冗余元数据失败如何处理? 运行元数据迁移或元数据发现任务时,报错“No privilege to this kms operation” 运行权限迁移任务时,日志报错“Unsupported authorization for default
API - 湖仓构建 LakeFormation
API Console类API LakeCat类API
如何调用API - 湖仓构建 LakeFormation
如何调用API 构造请求 认证鉴权 返回结果
如何获取AK/SK - 湖仓构建 LakeFormation
如何获取AK/SK AK/SK(Access Key ID/Secret Access Key)即访问密钥,包含访问密钥ID(AK)和秘密访问密钥(SK)两部分,系统通过AK识别用户的身份,通过SK对请求数据进行签名验证,用于确保请求的机密性、完整性和请求者身份的正确性。
实例管理 - 湖仓构建 LakeFormation
实例管理 创建实例 - CreateLakeFormationInstance 查询实例列表 - ListLakeFormationInstances 删除实例 - DeleteLakeFormationInstance 查询实例详情 - ShowLakeFormationInstance
实例管理类 - 湖仓构建 LakeFormation
实例管理类 如何获取LakeFormation实例ID 删除LakeFormation实例时报错如何处理

