参数-华为云

分布式数据库中间件 DDM-修改自定义参数模板:操作步骤

操作步骤登录分布式数据库中间件控制台。单击左侧导航栏“参数模板”，在“自定义”页签下单击参数模板名称。在“参数详情”页签下，根据需要修改相关参数值，相关参数说明请参见实例参数说明。图1 编辑参数模板可进行的操作如下：单击“保存”，在弹出框中单击“是”，保存修改。单击“取消”，放弃本次设置。单击“预览”，可对比参数修改前和修改后的值。参数修改完成后，您可以单击“模板历史记录”查看参数的修改详情。参数模板修改后，不会立即应用到当前使用的实例，您需要进行应用操作才可生效，具体操作请参见应用参数模板。修改某些参数或字符集后需要手动重启，由于变更规格导致的强制重启，不会触发该参数生效。修改配置参数可能影响应用访问DDM实例，请谨慎操作。修改参数命令下发成功后，预计需要20~60秒生效，请耐心等待。参数模板修改后，某些参数会立即应用到当前使用实例中，请谨慎操作。

分布式数据库中间件 DDM 参数模板管理

数据复制服务 DRS-源数据库表字段类型检查:Oracle为源同步场景

Oracle为源同步场景表1 源库表字段类型检查预检查项源库表字段类型检查。描述对源数据库待同步表字段进行检查。不通过提示及处理建议不通过原因：源数据库表含有不支持的表字段类型。支持的表字段类型有： VARCHAR，VARCHAR2，NVARCHAR2，NUMBER，FLOAT，LONG，DATE，BINARY_FLOAT，BINARY_DOUBLE，RAW，LONG RAW，CHAR，NCHAR，CLOB，NCLOB，BLOB，ROWID，TIMESTAMP，TIMESTAMP WITH TIME ZONE，TIMESTAMP WITH LOCAL TIME ZONE。处理建议：请选择其他可同步的表。

数据复制服务 DRS 数据库参数检查

数据复制服务 DRS-修改任务参数:操作步骤

操作步骤在“实时同步管理”界面，选择指定的同步任务。单击任务名称，页面跳转至“基本信息”页面。单击左侧“参数管理”，在“参数”页签可对当前同步任务的参数信息进行修改。图1 查看参数信息修改完成后，可选择“保存”或者“取消”设置。单击“保存”，在弹出框中单击“是”，保存修改。单击“取消”，在弹出框中单击“是”，放弃本次设置。部分参数完成修改后，需要重启任务后才生效，可单击右上角“重启”按钮使之生效，也可参考重启同步任务内容进行重启。除此以外，重置、续传、任务重建、主备倒换、全量阶段修改限速操作也会重启任务进程使设置生效。

数据复制服务 DRS 参数管理

数据复制服务 DRS-修改任务参数:任务参数说明

任务参数说明表1 任务参数说明参数名描述取值范围默认值参数类型是否需要重启 applier_thread_num 全量阶段写数据到目标数据库的线程数与规格大小有关。极小规格：1-4 小规格：1-4 中规格：1-8 大规格：1-18 超大规格：1-24 与规格大小有关。极小规格：2 小规格：2 中规格：4 大规格：6 超大规格：12 int 是 read_task_num 全量阶段从源数据库读取数据的线程数与规格大小有关。极小规格：1-2 小规格：1-2 中规格：1-4 大规格：1-8 超大规格：1-12 与规格大小有关。极小规格：1 小规格：1 中规格：2 大规格：4 超大规格：6 int 是 shard_task_num 全量阶段从源数据库分片线程数与规格大小有关。极小规格：1-2 小规格：1-2 中规格：1-4 大规格：1-8 超大规格：1-8 与规格大小有关。极小规格：1 小规格：1 中规格：2 大规格：4 超大规格：4 int 是 increment_writer_num 增量阶段写目标库线程数与规格大小有关。极小规格：1-8 小规格：1-16 中规格：1-32 大规格：1-128 超大规格：1-128 与规格大小有关。极小规格：4 小规格：8 中规格：16 大规格：64 超大规格：64 int 是 relay_socket_timeout 增量阶段从源数据库拉取日志的超时时间 30000-2147483647毫秒 30000毫秒 int 是 datamove_source_socket_timeout 全量阶段从源数据库拉取数据的超时时间 120000-2147483647毫秒 120000毫秒 int 是

数据复制服务 DRS 参数管理

MAPREDUCE服务 MRS-Flink作业参数规则:Flink作业参数配置规范

Flink作业参数配置规范 Flink作业参数配置规范如下表所示。表1 Flink作业参数配置规范参数名称是否必填参数描述建议值 -c 必填指定主类名。根据实际情况而定 -ynm 必填 Flink Yarn作业名称。根据实际情况而定 execution.checkpointing.interval 必填 Checkpoint触发间隔（毫秒），通过-yD添加，单位毫秒。 60000 execution.checkpointing.timeout 必填 Checkpoint超时时长，通过-yD添加，默认值为30min。 30min parallelism.default 选填作业并行度，例如join算子，通过-yD添加，默认值为1。根据实际情况而定 table.exec.state.ttl 必填 Flink状态ttl（join ttl），通过-yD添加，默认值为0。根据实际情况而定

MAPREDUCE服务 MRS Flink作业参数规范

流水线 CODEARTS PIPELINE-参数使用:操作步骤

操作步骤新建构建任务。在“参数设置”页面添加releaseversion参数并设置好默认值，将“运行时设置”打开。在“构建步骤”页面，选择“上传软件包到软件发布库”，将“发布版本号”配置成引用参数形式。在参数输入框输入“$”符号后会自动出现参数列表，选择上一步已经新建好的releaseversion参数。配置完成后，保存构建任务。新建空白模板流水线，在流水线阶段添加一个新的任务，然后在该任务中添加“Build构建”插件并调用刚创建的构建任务，即可看到刚新建好的构建任务参数releaseversion。将鼠标移动到releaseversion参数上，可以一键将该参数设置为流水线参数。或直接单击“确定”，然后切换到流水线“参数设置”页面，新建流水线参数releaseversion，类型可以根据需求选择自增长或字符串等，设置默认值并打开运行时设置。再切回到流水线“任务编排”页面，编辑刚添加的构建任务，将流水线的releaseversion参数通过“$”符号引用到构建任务的releaseversion参数内。该处只显示任务中已开启“运行时设置”的文本类型参数。参数引用形式为“${ParameterName}”，其中“ParameterName”为流水线参数名，在参数输入框输入“$”符号后会自动出现参数列表。鼠标移至参数名称，可以快速将该参数设置为流水线参数并能直接引用该参数。完成参数引用后，保存信息，然后单击“保存并执行”，弹出“执行配置”侧滑框，可查看“运行参数配置”。运行时参数值默认为添加参数时为参数设置的默认值，可根据需要进行修改。流水线运行时在构建任务内使用的就是此时输入的参数值。设置完参数，单击“运行”，开始使用配置的参数执行流水线。

流水线 CODEARTS PIPELINE 配置流水线参数

云数据库 GAUSSDB-查询参数模板的应用记录:响应示例

响应示例查询参数模板的应用记录成功。 { "total_count": 2, "histories": [ { "instance_id": "1995a67680474481b3e42ac1474e32e0in14", "instance_name": "gauss-a283", "apply_result" : "SUCCESS", "applied_at" : "2022-08-09T03:06:52+0800", "error_code" : null }, { "instance_id": "8303819fd8744ef69f34595e9710a33din14", "instance_name": "gauss-2423-lt-master", "apply_result" : "FAILED", "applied_at" : "2022-08-09T03:06:52+0800", "error_code" : "DBS.280005" } ] }

云数据库 GAUSSDB 参数配置

云数据库 GAUSSDB-查询参数模板的应用记录:响应参数

响应参数表2 参数说明参数参数类型描述 histories Array of objects 应用记录列表，具体参数请参考表3。 total_count Integer 总记录数。表3 histories字段数据结构说明参数参数类型描述 instance_id String 实例ID。 instance_name String 实例名称。 apply_result String 应用状态。 SUCCESS FAILED APPLYING applied_at String 应用时间，格式为“yyyy-mm-ddThh:mm:ssZ”。其中，T指某个时间的开始；Z指时区偏移量，例如北京时间偏移显示为+0800。 error_code String 失败原因错误码，如DBS.280005。

云数据库 GAUSSDB 参数配置

云数据库 GAUSSDB-查询参数模板的应用记录:URI

URI GET https://{Endpoint}/v3/{project_id}/configurations/{config_id}/applied-histories 表1 参数说明参数是否必选参数类型描述 project_id 是 String 租户在某一Region下的项目ID。获取方法请参见获取项目ID。 config_id 是 String 参数模板ID。 offset 否 Integer 索引位置，偏移量。从第一条数据偏移offset条数据后开始查询，默认为0（偏移0条数据，表示从第一条数据开始查询），必须为数字，不能为负数。例如：该参数指定为0，limit指定为10，则只展示第1-10条数据。 limit 否 Integer 查询记录数。默认为100，不能为负数，最小值为1，最大值为100。例如该参数设定为10，则查询结果最多只显示10条记录。

云数据库 GAUSSDB 参数配置

数据治理中心 DATAARTS STUDIO-配置HDFS源端参数

配置HDFS源端参数作业中源连接为HDFS连接时，即从MRS HDFS、FusionInsight HDFS、Apache HDFS导出数据时，源端作业参数如表1所示。表1 HDFS作为源端时的作业参数参数类型参数名说明取值样例基本参数源连接名称由用户下拉选择即可。 hdfs_to_cdm 源目录或文件 “列表文件”选择为“否”时，才有该参数。待迁移数据的目录或单个文件路径。待迁移数据的目录，将迁移目录下的所有文件（包括所有嵌套子目录及其子文件）。该参数支持配置为时间宏变量，且一个路径名中可以有多个宏定义变量。使用时间宏变量和定时任务配合，可以实现定期同步新增数据，详细说明请参见使用时间宏变量完成增量同步。说明：如果配置了时间宏变量，通过DataArts Studio数据开发调度CDM迁移作业时，系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”，而不是“CDM作业实际启动时间-偏移量”。 /user/cdm/ 文件格式传输数据时所用的文件格式，可选择以下文件格式： CSV格式：以CSV格式解析源文件，用于迁移文件到数据表的场景。二进制格式：选择“二进制格式”时不解析文件内容直接传输，不要求文件格式必须为二进制。适用于文件到文件的原样复制。 Parquet格式：以Parquet格式解析源文件，用于HDFS数据导到表的场景。 CSV格式列表文件当“文件格式”选择为“二进制格式”时，才有该参数。打开列表文件功能时，支持读取OBS桶中文件（如txt文件）的内容作为待迁移文件的列表。该文件中的内容应为待迁移文件的绝对路径（不支持目录），文件内容示例如下： /mrs/job-properties/application_1634891604621_0014/job.properties /mrs/job-properties/application_1634891604621_0029/job.properties 是列表文件源连接当“列表文件”选择为“是”时，才有该参数。可选择列表文件所在的OBS连接。 OBS_test_link 列表文件OBS桶当“列表文件”选择为“是”时，才有该参数。该参数表示列表文件所在的OBS桶名。 01 列表文件或目录当“列表文件”选择为“是”时，才有该参数。该参数表示列表文件所在的OBS桶中的绝对路径或目录。 /0521/Lists.txt 高级属性换行符文件中的换行符，默认自动识别“\n”、“\r”或“\r\n”。当“文件格式”选择为“CSV格式”时，才有该参数。 \n 字段分隔符文件中的字段分隔符，使用Tab键作为分隔符请输入“\t”。当“文件格式”选择为“CSV格式”时，才有该参数。 , 首行为标题行 “文件格式”选择“CSV格式”时才有该参数。在迁移CSV文件到表时，CDM默认是全部写入，如果该参数选择“是”，CDM会将CSV文件的前N行数据作为标题行，不写入目的端的表。否编码类型文件编码类型，例如：“UTF-8”或“GBK”。只有文本文件可以设置编码类型，当“文件格式”选择为“二进制格式”时，该参数值无效。 GBK 启动作业标识文件选择是否开启作业标识文件的功能。当源端路径下存在启动作业的标识文件时才启动作业，否则会挂起等待一段时间，等待时长在下方“等待时间”中配置。 ok.txt 过滤类型满足过滤条件的路径或文件会被传输，该参数有“无”、“通配符”和“正则表达式”三种选择。具体使用方法可参见文件增量迁移。 - 目录过滤器 “过滤类型”选择“通配符”、“正则表达式”时，用通配符过滤目录，符合过滤器规则的目录，允许进行迁移。支持配置多个路径，中间使用“,”分隔。说明：如果配置了时间宏变量，通过DataArts Studio数据开发调度CDM迁移作业时，系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”，而不是“CDM作业实际启动时间-偏移量”。 *input 文件过滤器 “过滤类型”选择“通配符”、“正则表达式”时，用通配符过滤目录下的文件，符合过滤器规则的文件，允许进行迁移。支持配置多个文件，中间使用“,”分隔。说明：如果配置了时间宏变量，通过DataArts Studio数据开发调度CDM迁移作业时，系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”，而不是“CDM作业实际启动时间-偏移量”。 *.csv 时间过滤选择“是”时，可以根据文件的修改时间，选择性的传输文件。是起始时间 “过滤类型”选择“时间过滤器”时，可以指定一个时间值，当文件的修改时间大于等于该时间才会被传输，输入的时间格式需为“yyyy-MM-dd HH:mm:ss”。该参数支持配置为时间宏变量，例如${timestamp(dateformat(yyyy-MM-dd HH:mm:ss,-90,DAY))}表示：只迁移最近90天内的文件。说明：如果配置了时间宏变量，通过DataArts Studio数据开发调度CDM迁移作业时，系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”，而不是“CDM作业实际启动时间-偏移量”。 2019-07-01 00:00:00 终止时间 “过滤类型”选择“时间过滤器”时，可以指定一个时间值，当文件的修改时间小于该时间才会被传输，输入的时间格式需为“yyyy-MM-dd HH:mm:ss”。该参数支持配置为时间宏变量，例如${timestamp(dateformat(yyyy-MM-dd HH:mm:ss))}表示：只迁移修改时间为当前时间以前的文件。说明：如果配置了时间宏变量，通过DataArts Studio数据开发调度CDM迁移作业时，系统会将时间宏变量替换为“数据开发作业计划启动时间-偏移量”，而不是“CDM作业实际启动时间-偏移量”。 2019-07-30 00:00:00 创建快照如果选择“是”，CDM读取HDFS系统上的文件时，会先对待迁移的源目录创建快照（不允许对单个文件创建快照），然后CDM迁移快照中的数据。需要HDFS系统的管理员权限才可以创建快照，CDM作业完成后，快照会被删除。否加密方式 “文件格式”选择“二进制格式”时，该参数才显示。如果源端数据是被加密过的，则CDM支持解密后再导出。这里选择是否对源端数据解密，以及选择解密算法：无：不解密，直接导出。 AES-256-GCM：使用长度为256byte的AES对称加密算法，目前加密算法只支持AES-256-GCM（NoPadding）。该参数在目的端为加密，在源端为解密。详细使用方法请参见迁移文件时加解密。 AES-256-GCM 数据加密密钥 “加密方式”选择“AES-256-GCM”时显示该参数，密钥由长度64位的十六进制数组成，且必须与加密时配置的“数据加密密钥”一致。如果不一致系统不会报异常，只是解密出来的数据会错误。 DD0AE00DFECD78BF051BCFDA25BD4E320DB0A7AC75A1F3FC3D3C56A457DCDC1B 初始化向量 “加密方式”选择“AES-256-GCM”时显示该参数，初始化向量由长度32的十六进制数组成，且必须与加密时配置的“初始化向量”一致。如果不一致系统不会报异常，只是解密出来的数据会错误。 5C91687BA886EDCD12ACBC3FF19A3C3F MD5文件名后缀 “文件格式”选择“二进制格式”时，该参数才显示。校验CDM抽取的文件，是否与源文件一致，详细请参见MD5校验文件一致性。 .md5 父主题：配置作业源端参数

数据治理中心 DATAARTS STUDIO 配置作业源端参数

数据治理中心 DATAARTS STUDIO-配置Redis目的端参数

配置Redis目的端参数当作业将数据导入到Redis时，目的端作业参数如表1所示。表1 Redis作为目的端时的作业参数参数名说明取值样例 Redis键前缀键的前缀，类似关系型数据库的表名。 TABLE 值存储类型仅支持以下数据格式： STRING：不带列名，如“值1，值2”形式。 HASH：带列名，如“列名1=值1，列名2=值2”的形式。 STRING 是否以列值作为field 当值存储类型为HASH时显示此参数。仅支持Hash，如果打开开关，除主键列外，按字段顺序交替取值作为field和value。是写入前将相同的键删除写入前将相同的键删除。否：如果原来Redis已存在类型不同的同名key，则迁移作业会跳过该key。是：Redis会先删除原有的同名key，再执行迁移。否键分隔符用来分隔关系型数据库的表和列名。 _ 值分隔符以STRING方式存储时，列之间的分隔符。 ; key值有效期用于设置统一的生存时间，单位：秒。 300 父主题：配置作业目的端参数

数据治理中心 DATAARTS STUDIO 配置作业目的端参数

云客服-InterposalRule

InterposalRule 表1 InterposalRule参数结构序号名称参数类型是否必选说明 1.1 name string True 规则名称 1.2 score number True 规则扣分 1.3 seconds number True 重叠秒数限制 1.4 times number True 重叠次数限制 1.5 interposal_id string True 规则标识 1.6 other object False 质检条件 1.6.1 call_end number False 单通通话发话结束时间 1.6.2 call_from number False 单通通话发话开始时间父主题：公共参数结构

云客服公共参数结构

智能数据洞察 DATAARTS INSIGHT-获取项目ID:调用API获取项目ID

调用API获取项目ID 项目ID可以通过调用查询指定条件下的项目信息API获取。获取项目ID的接口为“GET https://{Endpoint}/v3/projects”，其中{Endpoint}为IAM的终端节点，可以从地区和终端节点获取。响应示例如下，例如DataArts Insight服务部署的区域为“cn-north-4”，应消息体中查找“name”为“cn-north-4”，其中projects下的“id”即为项目ID。

智能数据洞察 DATAARTS INSIGHT 公共参数

智能数据洞察 DATAARTS INSIGHT-配置导入导出参数:请求参数

请求参数表2 请求Header参数参数是否必选参数类型描述 X-Workspace-Id 是 String 工作空间ID。 X-Auth-Token 是 String 用户Token。 Content-Type 是 String 固定值，指定请求体类型和字符集。表3 请求Body参数参数是否必选参数类型描述 service_type 是 String 服务类型。 obs_endpoint 是 String OBS终端节点。 obs_bucket_name 是 String OBS桶名。 max_storage_days 是 Integer 导出文件在OBS的最大存储时间。 obs_path_prefix 是 String OBS前缀路径。

智能数据洞察 DATAARTS INSIGHT 导入导出参数

智能数据洞察 DATAARTS INSIGHT-配置导入导出参数:请求示例

请求示例 POST https://{endpoint}/v1/{project_id}/exports/config { "service_type" : "obs", "obs_endpoint" : "obs.xxx.com", "obs_bucket_name" : "xxxxx", "max_storage_days" : 1, "obs_path_prefix" : "/dataArts-insight" }

智能数据洞察 DATAARTS INSIGHT 导入导出参数

云服务器内容精选

参数

7*24

备案

专业服务

退订

建议反馈

售前咨询热线