检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建用户并授权使用DLF 如果您需要对您所拥有的DLF进行精细的权限管理，您可以使用统一身份认证服务（Identity and Access Management，简称IAM），通过IAM，您可以： 根据企业的业务组织，在您的华为云账号中，给企业中不同职能部门的员工创建IAM用户，
管理企业项目 企业项目是一种云资源管理方式。企业管理（Enterprise Management）提供面向企业客户的云上资源管理、人员管理、权限管理、财务管理等综合管理服务。区别于管理控制台独立操控、配置云产品的方式，企业管理控制台以面向企业资源管理为出发点，帮助企业以公司、部门、
CS作业管理 为了协助用户快速进行流式大数据分析，数据开发模块集成了CS作业管理功能。用户可通过“数据开发数据开发模块”控制台选择区的下拉选项，选择“数据集成”，进入数据集成管理界面。在左边的导航栏中选择CS作业管理，进入CS作业管理页面。同时，用户也可以直接访问CS控制台进行相应操作
产品功能 数据管理 支持管理DWS、DLI、MRS Hive等多种数据仓库。 支持可视化和DDL方式管理数据库表。 数据集成 与云数据迁移服务（CDM）无缝集成，依托CDM的强力支撑，支持20多种异构数据源之间可靠高效的数据传输，轻松实现多数据源集成到数据仓库。 脚本开发 提供在线脚本编辑器
开发一个Hive SQL脚本 本章节介绍如何在数据开发模块上进行Hive SQL开发。 场景说明 数据开发模块作为一站式大数据开发平台，支持多种大数据工具的开发。Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的SQL查询功能；可以将
成长地图 | 华为云 数据湖工厂 数据湖工厂（Data Lake Factory）提供一站式的大数据协同开发平台，帮助用户快速构建大数据处理中心。 产品介绍 产品介绍 立即使用 立即使用 成长地图 由浅入深，带您玩转DLF 01 了解 数据湖工厂服务（Data Lake Factory
环境准备 请执行以下步骤访问数据开发模块控制台： 访问华为云管理控制台。 单击管理控制台左上角的，选择区域和项目。 在首页“所有服务”中，选择“EI企业智能 > 数据湖工厂”，进入数据开发模块服务的总览页面。
数据结构 公共请求消息头如表1所示。 表1 公共请求消息头 参数 是否必选 类型 说明 X-Sdk-Date 是 String 请求的发生时间，格式为(YYYYMMDD'T'HHMMSS'Z')。 取值为当前系统的GMT时间。 Authorization 是 String 签名认证信息
认证鉴权 调用接口有如下两种认证方式，您可以选择其中一种进行认证鉴权。 Token认证：通过Token认证通用请求。 AK/SK认证：通过AK（Access Key ID）/SK（Secret Access Key）加密调用请求。推荐使用AK/SK认证，其安全性比Token认证要高
SMN 功能 通过SMN节点向用户发送通知消息。 参数 用户可参考表1和表2配置SMN节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称 是 节点名称，可以包含中文、英文字母、数字、“_”、“-”、“/”、“<”、“>”等各类特殊字符，长度为1～128个字符。 主题名称
项目ID 获取项目ID 项目ID表示租户的资源。用户可在对应页面下查看不同Region对应的项目ID。 注册并登录管理控制台。 在用户名的下拉列表中单击“我的凭证”。 在“我的凭证”页面，查看用户名、账号名，在项目列表中查看项目ID。 调用API获取项目ID 项目ID可以通过调用查询指定条件下的项目信息
MRS Spark Python 功能 通过MRS Spark Python节点实现在MRS中执行预先定义的Spark Python作业。 参数 用户可参考表1和表2配置MRS Spark Python节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称 是 节点名称，可以包含中文
