数据湖工厂_c 数据库连接工厂类-华为云

Flexus L实例

即开即用，轻松运维，开启简单上云第一步

立即查看

免费体验中心

免费领取体验产品，快速开启云上之旅

立即前往

企业级DeepSeek

支持API调用、知识库和联网搜索，满足企业级业务需求

立即购买

免费体验中心

免费领取体验产品，快速开启云上之旅

立即前往

企业级DeepSeek

支持API调用、知识库和联网搜索，满足企业级业务需求

立即前往

Flexus L实例

即开即用，轻松运维，开启简单上云第一步

立即查看

免费体验中心

免费领取体验产品，快速开启云上之旅

¥0.00

元

Flexus L实例

即开即用，轻松运维，开启简单上云第一步

立即前往

企业级DeepSeek

支持API调用、知识库和联网搜索，满足企业级业务需求

立即购买

数据湖工厂内容精选换一换
DDoS高防非网站类接入（二）

No,容器镜修服务 SWR, 微服务引擎CSE ,资源楼板服务 New！,数字化办公 New！,分布式消息服务 DMS, 应用性能管理 APM , 数据湖工厂 New!, 对象存储迁移服务,云性能测试服务 CPTS, 区块链服务BCS , 隐私保护通话 New！, 数据复制服务 New！,https://www

来自：其他

查看更多

实时报警平台搭建

-24*60*60)”。脚本调试无误后，我们需要保存该脚本，脚本名称为“dli_partition_count”。在后续的作业中设置为定期执行该脚本（使用DLF作业开发和作业调度每天定时输出告警统计报表），实现定期输出告警统计报表。创建 CDM 作业方案的最后一步需要将 OBS 中的告警统计报表迁移到RDS

来自：帮助中心

查看更多
数据湖工厂相关内容
步骤3：服务退订

OBS服务支持按需和包周期计费，套餐包暂不支持退订。本例中使用按需计费，完成后删除新建的存储桶即可；另外， DataArts Studio 作业日志和 DLI 脏数据默认存储在以dlf-log-{Project id}命名的OBS桶中，在退订DataArts Studio后可以一并删除。 DLI DLI计费说明 DLI服

来自：帮助中心

查看更多

Hudi目的端的作业失败，日志报错Read Timeout怎么解决？

否则跳转2。多租户模式下，确认其他租户的作业是否正常。如果所有租户的作业执行spark sql都有问题，跳转3。否则，跳转4。进一步确认：用dlf建个脚本，选择直连连接，执行一条spark sql，看是否报time out的错（甚至可能数据库都list不出来）。如果有以上现象，大概率是 MRS 集群的jdbc

来自：帮助中心

查看更多

数据湖工厂更多内容
撤销任务包

{"package_ids":["12","13"]} 响应示例成功响应 HTTP状态码 200 失败响应 HTTP状态码 400 { "error_code": "DLF.0810", "error_msg": "Task does not exist." } 父主题：作业开发API

来自：帮助中心

查看更多

创建任务

参数是否必选参数类型描述 datasource_type 是 String 数据源类型： ALIYUN_DLF代表Data Lake Formation DLF、 MRS_RDS_FOR_MYSQL代表MRS 云数据库 RDS(for MySQL)、 OPEN_FOR_MYS

来自：帮助中心

查看更多

修改任务信息

参数是否必选参数类型描述 datasource_type 是 String 数据源类型： ALIYUN_DLF代表Data Lake Formation DLF、 MRS_RDS_FOR_MYSQL代表MRS云数据库RDS(for MySQL)、 OPEN_FOR_MYS

来自：帮助中心

查看更多

创建作业

创建作业功能介绍此接口可以创建一个新作业，作业由一个或多个相互依赖的节点构成，支持Hive SQL、CDM Job等节点。DLF有两类型作业：批处理作业和实时作业。调试您可以在API Explorer中调试该接口，支持自动认证鉴权。 URI URI格式 POST /v1/{project_id}/jobs

来自：帮助中心

查看更多

步骤4：服务退订

OBS服务支持按需和包周期计费，套餐包暂不支持退订。本例中使用按需计费，完成后删除新建的存储桶即可；另外，DataArts Studio作业日志和DLI脏数据默认存储在以dlf-log-{Project id}命名的OBS桶中，在退订DataArts Studio后可以一并删除。 DWS DWS计费说明 DWS服

来自：帮助中心

查看更多

执行脚本

"2019-07-25" } } 响应示例成功响应 HTTP状态码 200 失败响应 HTTP状态码 400 { "error_code":"DLF.6201", "error_msg":"The script does not exist." } 状态码状态码请参见状态码。

来自：帮助中心

查看更多

获取任务详情

MetaDataMigrationParameter 参数参数类型描述 datasource_type String 数据源类型： ALIYUN_DLF代表Data Lake Formation DLF、 MRS_RDS_FOR_MYSQL代表MRS云数据库RDS(for MySQL)、 OPEN_FOR_MYS

来自：帮助中心

查看更多

查询系统任务详情

d40ab3f0005" } ] } 失败响应 HTTP状态码 400 { "error_code":"DLF.20810", "error_msg":"Task[008aae2e675d3bcb01675d40ab3f0005] does

来自：帮助中心

查看更多

发布任务包

"package_id": 23 } ] } 失败响应 HTTP状态码 400 { "error_code": "DLF.0810", "error_msg": "Task does not exist." } 父主题：作业开发API

来自：帮助中心

查看更多

Elasticsearch数据连接参数说明（内测）

通过KMS加解密数据源认证信息，选择KMS中的任一默认密钥或自定义密钥即可。说明：第一次通过DataArts Studio或KPS使用KMS加密时，会自动生成默认密钥dlf/default或kps/default。关于默认密钥的更多信息，请参见什么是默认密钥。仅支持通过对称密钥加密，暂不支持非对称密钥。绑定Agent

来自：帮助中心

查看更多

权限策略

户被授予授权项所对应的策略，该用户才能成功调用该接口。例如，用户要调用接口来查询作业列表，那么这个 IAM 用户被授予的策略中必须包含允许“dlf:job:list”的授权项，该接口才能调用成功。支持的授权项策略包含系统策略和自定义策略，如果系统策略不满足授权要求，管理员可以创建

来自：帮助中心

查看更多

查询脚本实例执行结果

}] }], "status": "FINISHED" } 失败响应 HTTP状态码 400 { "error_code":"DLF.6201", "error_msg":"The script does not exist." } 状态码状态码请参见状态码。

来自：帮助中心

查看更多

DLI数据连接参数说明

通过KMS加解密数据源认证信息，选择KMS中的任一默认密钥或自定义密钥即可。说明：第一次通过DataArts Studio或KPS使用KMS加密时，会自动生成默认密钥dlf/default或kps/default。关于默认密钥的更多信息，请参见什么是默认密钥。仅支持通过对称密钥加密，暂不支持非对称密钥。绑定Agent

来自：帮助中心

查看更多

OBS数据连接参数说明（内测）

通过KMS加解密数据源认证信息，选择KMS中的任一默认密钥或自定义密钥即可。说明：第一次通过DataArts Studio或KPS使用KMS加密时，会自动生成默认密钥dlf/default或kps/default。关于默认密钥的更多信息，请参见什么是默认密钥。仅支持通过对称密钥加密，暂不支持非对称密钥。绑定Agent

来自：帮助中心

查看更多

RDS(SAP HANA)数据连接参数说明

通过KMS加解密数据源认证信息，选择KMS中的任一默认密钥或自定义密钥即可。说明：第一次通过DataArts Studio或KPS使用KMS加密时，会自动生成默认密钥dlf/default或kps/default。关于默认密钥的更多信息，请参见什么是默认密钥。仅支持通过对称密钥加密，暂不支持非对称密钥。绑定Agent

来自：帮助中心

查看更多

MRS Hudi数据连接参数说明（内测）

开启委托功能，即可以在无需持有永久AK\SK的情况下创建数据连接，根据DLF配置的调度身份执行CDM作业。公共委托是使用委托为是时显示该参数。仅涉及用于测试该连接委托功能是否正常，作业运行将根据DLF配置的调度身份执行CDM作业。访问标识(AK) 是 “数据集成”参数开

来自：帮助中心

查看更多

RDS(达梦数据库DM)数据连接参数说明

通过KMS加解密数据源认证信息，选择KMS中的任一默认密钥或自定义密钥即可。说明：第一次通过DataArts Studio或KPS使用KMS加密时，会自动生成默认密钥dlf/default或kps/default。关于默认密钥的更多信息，请参见什么是默认密钥。仅支持通过对称密钥加密，暂不支持非对称密钥。绑定Agent

来自：帮助中心

查看更多