检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
配置服务级Admin权限 因作业执行过程中,需要往obs写执行日志信息,因此粗粒度授权时,所有作业都需要添加 OBS OperateAccess权限。
前提条件 已开通相应的云服务并在云服务中创建数据库。例如,开发DLI的脚本前,请确保DLI服务已开通,并在DLI服务中创建好数据库。Flink SQL脚本不涉及。 已在数据开发模块中创建与脚本的数据连接类型匹配的数据连接,请参见创建数据连接。Flink SQL脚本不涉及。
图片路径 是 需要识别的图片在OBS上的路径。 识别类型 是 可识别的图片类型, 当前仅支持通用文字识别。可支持扫描文件、电子文档、书籍、票据和表单等多种场景的文字识别。 识别结果存储目录 是 指定识别结果存储的OBS目录。
目前支持新建如下数据表: DLI DWS MRS Hive CloudTable 前提条件 已开通相应的云服务并在云服务中创建数据库。例如,新建DLI表前,请确保DLI服务已开通,并在DLI服务中创建好数据库。
不影响您使用DLF服务的其它功能。
Delete OBS OBS Manager Open/Close Resource Data Quality Monitor Sub Job SMN Dummy For Each 父主题: 参考
Import GES 功能 通过Import GES节点可以将OBS桶中的文件导入到GES的图中。 参数 用户可参考表1和表2配置Import GES节点的参数。
例如,使用“数据迁移”节点将数据从OBS导入到MRS Hive。
例如,使用“数据迁移”节点将数据从OBS导入到MRS Hive。 S S 数据仓库 是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支持管理决策。本服务中指的是华为云上数据仓库,如DWS、DLI、MRS Hive等。
表达式概述 数据开发模块作业中的节点参数可以使用表达式语言(Expression Language,简称EL),根据运行环境动态生成参数值。数据开发模块 EL表达式使用简单的算术和逻辑计算,引用内嵌对象,包括作业对象和一些工具类对象。 作业对象:提供了获取作业中上一个节点的输出消息
请参见《弹性云服务器用户指南》的“查看云服务器详细信息”页面获取。 端口 是 主机的端口号。 用户名 是 主机的用户名。 登录方式 是 选择主机的登录方式: 密钥对 密码 密钥对 是 主机的登录方式为密钥对时,用户获取并上传其私钥文件至OBS,在此处选择对应的OBS路径。
OBS 路径(必选):单击,在弹出的“OBS文件浏览”窗口选择OBS路径。 CSS 集群名称(必选):单击,在弹出的“CloudSearch集群”窗口选择CloudSearch集群。 索引名称(必选):输入CSS类型的索引名称。
OBS 路径(必选):单击,在弹出的“OBS文件浏览”窗口选择OBS路径。 CSS 集群名称(必选):单击,在弹出的“CloudSearch集群”窗口选择CloudSearch集群。 索引名称(必选):输入CSS类型的索引名称。
DLF.0803 OBS路径不合法。 DLF.0810 查询的系统任务不存在。 DLF.0815 读取OBS文件失败。 DLF.1006 作业的节点为空。 DLF.1242 OBS桶不存在。 DLF.3004 作业名称不能为空。 DLF.3018 作业名称不合法。
OBS 路径(必选):单击,在弹出的“OBS文件浏览”窗口选择OBS路径。 CSS 集群名称(必选):单击,在弹出的“CloudSearch集群”窗口选择CloudSearch集群。 索引名称(必选):输入CSS类型的索引名称。
OBS 路径(必选):单击,在弹出的“OBS文件浏览”窗口选择OBS路径。 CSS 集群名称(必选):单击,在弹出的“CloudSearch集群”窗口选择CloudSearch集群。 索引名称(必选):输入CSS类型的索引名称。
服务 是 选择需要开机/关机的服务: ECS CDM CS 开关机设置 是 选择开关机类型: 开 关 开关机对象 是 选择需要开机/关机的具体对象,例如开启某个CDM集群。
OBS 路径(必选):单击,在弹出的“OBS文件浏览”窗口选择OBS路径。 CSS 集群名称(必选):单击,在弹出的“CloudSearch集群”窗口选择CloudSearch集群。 索引名称(必选):输入CSS类型的索引名称。
作业使用时涉及到的其他资源服务,请参见其他服务的配额。
在作业搜索框中搜索作业“doc1”,导出作业到本地,并上传作业至OBS文件夹中。 在DLF系统中删掉作业关联的dws数据连接“doctest”。 单击作业目录中的 > 导入作业,选择上传至OBS文件夹中的作业,并设置重名处理策略。