-
怎样排查DLI计费异常? - 数据湖探索 DLI
如果使用的是default队列执行作业,则按照扫描量计费。 计费详情可参考《数据湖探索价格详情》。 如果没有执行SQL作业,则可继续排查Spark作业。 Spark作业 进入“作业管理”>“Spark作业”页面。
-
查询作业结果-方式一(废弃) - 数据湖探索 DLI
input_size 否 long 作业执行过程中扫描的数据量。 schema 否 Array of Map 作业结果列名称和类型。 rows 否 Array of objects 作业结果集。
-
查询作业结果-方式二(废弃) - 数据湖探索 DLI
input_size 否 long 作业执行过程中扫描的数据量。 schema 否 Array of Map 作业结果列名称和类型。 rows 否 Array of objects 作业结果集。
-
预览SQL作业查询结果 - 数据湖探索 DLI
input_size 否 long 作业执行过程中扫描的数据量。 schema 否 Array of Map 作业结果列名称和类型。 rows 否 Array of Objects 作业结果集。
-
产品优势 - 数据湖探索 DLI
图1 DLI Serverless架构 与传统自建Hadoop集群相比,Serverless架构的DLI还具有以下优势: 表1 Serverless DLI与传统自建Hadoop集群对比的优势 优势 维度 数据湖探索 DLI 自建Hadoop系统 低成本 资金成本 按照实际扫描数据量或者
-
查询队列详情 - 数据湖探索 DLI
按照扫描量计费。 1:表示按照CU时收费。 2:表示按照包年包月收费。 resource_id 否 String 队列的资源ID。 resource_mode 否 Integer 资源模式。
-
MySQL CDC源表 - 数据湖探索 DLI
initial(默认):在第一次启动时,会先扫描历史全量数据,然后读取最新的Binlog数据。 latest-offset:在第一次启动时,不会扫描历史全量数据,直接从Binlog的末尾(最新的Binlog处)开始读取,即只读取该Connector启动以后的最新变更。
-
MySQL CDC源表 - 数据湖探索 DLI
initial(默认):在第一次启动时,会先扫描历史全量数据,然后读取最新的Binlog数据。 latest-offset:在第一次启动时,不会扫描历史全量数据,直接从Binlog的末尾(最新的Binlog处)开始读取,即只读取该Connector启动以后的最新变更。
-
查询所有队列 - 数据湖探索 DLI
按照扫描量计费。 1:表示按照CU时收费。 2:表示按照包年包月收费。 resource_id 否 String 队列的资源ID。 enterprise_project_id 否 String 企业项目ID。0”表示default,即默认的企业项目。
-
创建并提交Spark SQL作业 - 数据湖探索 DLI
若使用default队列,将按照扫描量计费。 用户也可根据需要自己创建队列。使用自建队列,将按照CU时或包年包月计费。 登录DLI管理控制台。 第一次进入数据湖探索管理控制台需要进行授权,以获取访问OBS的权限。