数据管理-华为云

数据管理服务 DAS-数据导入:使用须知

使用须知当需要进行数据备份或迁移时，您可以将数据导入目标数据表，目标CSV表数据类型须与待导入表数据类型保持一致，SQL文件同理。导入单文件大小最大可达1GB。可以支持导入的数据文件类型包括CSV格式和SQL文件格式。如果实例表数量超过10万，则不能使用CSV格式。暂不支持BINARY、VARBINARY、TINYBLOB、BLOB、MEDIUMBLOB、LONGBLOB等二进制类型字段的导入。不支持PostgreSQL增强版实例进行数据导入操作。

数据管理服务 DAS

数据管理服务 DAS-数据导出:使用须知

使用须知如果导出数据时未勾选“生成单表文件”，则导出的数据文件后缀为“.zip”格式，此格式的数据文件暂不支持直接导入，需要解压后才可再次导入。如果导出数据时勾选了“生成单表文件”，则导出的数据文件为每个单表的数据文件（“.sql”或者“.csv”格式），该情况下导出的数据文件可直接再次导入。如果导出的PostgreSQL实例表数量超过10万时，使用导出数据库功能会报错表数量过多，无法导出数据。此时请使用导出SQL结果集功能。不支持PostgreSQL增强版实例进行数据导出操作。

数据管理服务 DAS 数据导入和导出

数据治理中心 DATAARTS STUDIO-新建数据表:参数说明

参数说明表5 DLI数据表参数是否必选说明基本属性表名是数据表的名称。只能包含英文小写字母、数字、“_”，不能为纯数字，不能以“_”开头，且长度为1~63个字符。别名否数据表的别名，只能包含中文字符、英文字母、数字、“_”，不能为纯数字，不能以“_”开头，且长度为1~63个字符。数据连接类型是数据表所属的数据连接类型。系统默认。数据连接是数据表所属的数据连接。系统默认。数据库是数据表所属的数据库。系统默认。数据位置是选择数据存储的位置： OBS DLI 数据格式是选择数据的格式。“数据位置”为“OBS”时，配置该参数。 parquet：支持读取不压缩、snappy压缩、gzip压缩的parquet数据。 csv：支持读取不压缩、gzip压缩的csv数据。 orc：支持读取不压缩、snappy压缩的orc数据。 json：支持读取不压缩、gzip压缩的json数据。路径是选择数据存储的OBS路径。“数据位置”为“OBS”时，配置该参数。如果OBS路径不存在或者OBS桶不存在，系统支持可以自动创建OBS目录。说明：如果OBS桶创建超过上限，系统会自动提示“创建obs目录失败，错误原因：[Create OBS Bucket failed:TooManyBuckets:You have attempted to create more buckets than allowed]”。表描述否数据表的描述信息。表结构列类型是选择列类型。包含分区列和普通列。系统默认普通列。列名是填写列名，列名不能重复。类型是选择数据类型，具体说明请参见《数据湖探索SQL语法参考》的数据类型。列描述否填写列的描述信息。操作否单击，增加列。单击，删除列。表6 DWS数据表参数是否必选说明基本属性表名是数据表的名称。只能包含英文字母、数字、“_”，不能为纯数字，不能以“_”开头，且长度为1~63个字符。别名否数据表的别名，只能包含中文字符、英文字母、数字、“_”，不能为纯数字，不能以“_”开头，且长度为1~63个字符。数据连接类型是数据表所属的数据连接类型。系统默认。数据连接是数据表所属的数据连接。系统默认。数据库是数据表所属的数据库。系统默认。模式是选择数据库的模式。表描述否数据表的描述信息。高级选项否提供以下高级选项：选择数据表的存储方式行存模式列存模式选择数据表的压缩级别行存模式：压缩级别的有效值为YES/NO。列存模式：压缩级别的有效值为YES/NO/LOW/MIDDLE/HIGH，还可以配置列存模式同一压缩级别下不同的压缩水平0-3（数值越大，表示同一压缩级别下压缩比越大）。表结构列名是填写列名，列名不能重复。数据分类是选择数据类型的类别：数值类型货币类型布尔类型二进制类型字符类型时间类型几何类型网络地址类型位串类型文本搜索类型 UUID类型 JSON类型对象标识符类型类型是选择数据类型，具体说明请参见《数据仓库服务开发指南》的数据类型。列描述否填写列的描述信息。是否建ES索引否单击复选框时，表示需要建立ES索引。建立ES索引时，请同时在“CloudSearch集群名”中选择建立好的CSS集群。如何创建CSS集群，请参见《云搜索服务用户指南》的创建集群。 ES索引数据类型否选择ES索引的数据类型： text keyword date long integer short byte double boolean binary 操作否单击，增加列。单击，删除列。表7 MRS Hive数据表参数是否必选说明基本属性表名是数据表的名称。只能包含英文小写字母、数字、“_”，不能为纯数字，不能以“_”开头，且长度为1~63个字符。别名否数据表的别名，只能包含中文字符、英文字母、数字、“_”，不能为纯数字，不能以“_”开头，且长度为1~63个字符。数据连接类型是数据表所属的数据连接类型。系统默认。数据连接是选择数据表所属的数据连接。系统默认。数据库是选择数据表所属的数据库。系统默认。表描述否数据表的描述信息。表结构列名是填写列名，列名不能重复。数据分类是选择数据类型的类别：原始类型 ARRAY MAP STRUCT UNION 类型是选择数据类型，具体说明请参见LanguageManual DDL。列描述否填写列的描述信息。操作否单击，增加列。单击，删除列。表8 MRS Spark数据表参数是否必选说明基本属性表名是数据表的名称。只能包含英文小写字母、数字、“_”，不能为纯数字，不能以“_”开头，且长度为1~63个字符。别名否数据表的别名，只能包含中文字符、英文字母、数字、“_”，不能为纯数字，不能以“_”开头，且长度为1~63个字符。数据连接类型是数据表所属的数据连接类型。系统默认。数据连接是选择数据表所属的数据连接。系统默认。数据库是选择数据表所属的数据库。系统默认。表描述否数据表的描述信息。表结构列名是填写列名，列名不能重复。数据分类是选择数据类型的类别：原始类型 ARRAY MAP STRUCT UNION 类型是选择数据类型，具体说明请参见LanguageManual DDL。列描述否填写列的描述信息。操作否单击，增加列。单击，删除列。

数据治理中心 DATAARTS STUDIO 数据管理

数据治理中心 DATAARTS STUDIO-新建数据表:相关操作

相关操作查看表详情：在脚本开发导航栏，选择，展开下方的数据连接至数据表层级，右键单击表名称，选择“查看表详情”，可查看如表4所示的数据表信息。表4 表详情页面页签名称说明表信息显示数据表的基本信息和存储信息。字段信息显示数据表的字段信息。数据预览预览数据表的10条记录。 DDL 显示DLI/DWS/MRS Hive数据表的DDL。删除表：在脚本开发导航栏，选择，展开下方的数据连接至数据表层级，右键单击表名称，选择“删除”后，在弹出的页面中单击“确定”完成删除。删除操作不可撤销，请谨慎操作。

数据治理中心 DATAARTS STUDIO 数据管理

医疗智能体 EIHEALTH-数据管理常用操作:禁止/允许删除数据

禁止/允许删除数据您可以对某个数据设置禁止删除。设置禁止删除后，该目录只能添加数据，不支持删除数据。也可以通过“允许删除”取消禁止删除设置。图7 开启禁止删除数据支持设置最多15个数据的禁止删除状态。如果平台或者父目录设置禁止删除状态，则对应的数据根路径或者子路径均为禁止删除状态，子路径不支持同时设置允许删除状态；如果平台或者父目录设置允许删除，则之前子路径设置的禁止删除权限失效，全部子路径允许删除。

医疗智能体 EIHEALTH 数据管理

医疗智能体 EIHEALTH-数据管理常用操作:恢复数据

恢复数据平台支持数据的恢复机制，您可以将归档的核心数据进行恢复，避免造成损失。数据归档成功后，可以在“归档”页面查看归档记录，并进行恢复、删除操作。归档恢复时，您可以将数据恢复至本项目或有权限的其他项目。数据归档成功后，选择“归档”页签。图10 选择归档页签选择需要恢复的数据，单击操作列“恢复”。在恢复归档数据页面，选择需要恢复数据的位置和数据。图11 选择恢复数据的位置单击“确定”。

医疗智能体 EIHEALTH 数据管理

工业仿真工具链云服务 CRAFTARTSSIM-在线仿真处理:操作步骤

操作步骤单击“数据管理”，进入“数据管理”页面，如图1所示。图1 数据管理页面在左侧的目录树中选择待处理数据所在目录。右侧数据列表中显示所选目录中所拥有的文件夹和数据信息。勾选一条或多条待处理数据记录，单击“在线处理”。在页面右侧出现“在线处理”页签，如图2所示。图2 在线处理页签选择应用和指定输出目录，单击“确认”进行在线处理。 “选择应用”：选择云上在线处理使用的软件。 “选择文件”：单击“从云端添加”后弹出“从云端添加”页签，选择处理结果的输出目录，单击“确定”。

工业仿真工具链云服务 CRAFTARTSSIM 仿真数据管理

数据管理服务 DAS-数据导出:使用须知

使用须知如果导出数据时未勾选“生成单表文件”，则导出的数据文件后缀为“.zip”格式，此格式的数据文件暂不支持直接导入，需要解压后才可再次导入。如果导出数据时勾选了“生成单表文件”，则导出的数据文件为每个单表的数据文件（“.sql”或者“.csv”格式），该情况下导出的数据文件可直接再次导入。如果导出的MySQL 8.0实例表数量超过10万（5.7和5.6版本超过1万）时，使用导出数据库功能会报错表数量过多，无法导出数据。此时请使用导出SQL结果集功能。

数据管理服务 DAS

数据管理服务 DAS-数据导出:使用须知

使用须知如果导出数据时未勾选“生成单表文件”，则导出的数据文件后缀为“.zip”格式，此格式的数据文件暂不支持直接导入，需要解压后才可再次导入。如果导出数据时勾选了“生成单表文件”，则导出的数据文件为每个单表的数据文件（“.sql”或者“.csv”格式），该情况下导出的数据文件可直接再次导入。如果导出的MySQL 8.0实例表数量超过10万（5.7和5.6版本超过1万）时，使用导出数据库功能会报错表数量过多，无法导出数据。此时请使用导出SQL结果集功能。

数据管理服务 DAS

数据管理服务 DAS-数据导出:使用须知

使用须知如果导出数据时未勾选“生成单表文件”，则导出的数据文件后缀为“.zip”格式，此格式的数据文件暂不支持直接导入，需要解压后才可再次导入。如果导出数据时勾选了“生成单表文件”，则导出的数据文件为每个单表的数据文件（“.sql”或者“.csv”格式），该情况下导出的数据文件可直接再次导入。如果导出的Microsoft SQL Server实例表数量超过1万时，使用导出数据库功能会报错表数量过多，无法导出数据。此时请使用导出SQL结果集功能。

数据管理服务 DAS

数据管理服务 DAS-数据导出:使用须知

使用须知如果导出数据时未勾选“生成单表文件”，则导出的数据文件后缀为“.zip”格式，此格式的数据文件暂不支持直接导入，需要解压后才可再次导入。如果导出数据时勾选了“生成单表文件”，则导出的数据文件为每个单表的数据文件（“.sql”或者“.csv”格式），该情况下导出的数据文件可直接再次导入。如果导出的实例表数量超过1万时，使用导出数据库功能会报错表数量过多，无法导出数据。此时请使用导出SQL结果集功能。

数据管理服务 DAS 导入导出

数据管理服务 DAS-数据导出:使用须知

使用须知如果导出数据时未勾选“生成单表文件”，则导出的数据文件后缀为“.zip”格式，此格式的数据文件暂不支持直接导入，需要解压后才可再次导入。如果导出数据时勾选了“生成单表文件”，则导出的数据文件为每个单表的数据文件（“.sql”或者“.csv”格式），该情况下导出的数据文件可直接再次导入。如果导出的MySQL 8.0实例表数量超过10万（5.7和5.6版本超过1万）时，使用导出数据库功能会报错表数量过多，无法导出数据。此时请使用导出SQL结果集功能。

数据管理服务 DAS 数据导入和导出

AI开发平台MODELARTS-查询数据处理任务的版本列表:响应示例

响应示例状态码： 200 OK { "count" : 2, "versions" : [ { "task_version_id" : "qSaudx2sbPvthHygckA", "task_id" : "kM7j9TSa611ZzBThzSr", "version_name" : "V002", "description" : "", "status" : 0, "create_time" : 1606377874450, "inputs" : [ { "type" : "DATASET", "source" : "PYc9H2HGv5BJNwBGXyK", "version_id" : "Osc8SZ7TZStiRV4vYkZ", "name" : "dataset-test", "version_name" : "V0010" } ], "work_path" : { "type" : "DATASET", "path" : "PYc9H2HGv5BJNwBGXyK", "name" : "dataset-test", "version_name" : "V0011", "output_path" : "/test-obs/classify/output/qSaudx2sbPvthHygckA/" }, "template" : { "id" : "sys_data_validation", "name" : "name to translate", "operator_params" : [ { "name" : "MetaValidation", "advanced_params_switch" : false, "params" : { "task_type" : "image_classification", "dataset_type" : "manifest", "source_service" : "select", "filter_func" : "data_validation_select", "image_max_width" : "1920", "image_max_height" : "1920", "total_status" : "[0,1,2]" } } ] }, "duration_seconds" : 151 }, { "task_version_id" : "YHFWU18zXuNbqxtzegG", "task_id" : "kM7j9TSa611ZzBThzSr", "version_name" : "V001", "description" : "", "status" : 2, "create_time" : 1606375407276, "inputs" : [ { "type" : "DATASET", "source" : "PYc9H2HGv5BJNwBGXyK", "version_id" : "yoJ5ssClpNlOrsjjFDa", "name" : "dataset-test", "version_name" : "V009" } ], "work_path" : { "type" : "DATASET", "path" : "PYc9H2HGv5BJNwBGXyK", "name" : "dataset-test", "version_id" : "Osc8SZ7TZStiRV4vYkZ", "version_name" : "V0010", "output_path" : "/test-obs/classify/output/YHFWU18zXuNbqxtzegG/" }, "template" : { "id" : "sys_data_validation", "name" : "name to translate", "operator_params" : [ { "name" : "MetaValidation", "advanced_params_switch" : false, "params" : { "task_type" : "image_classification", "dataset_type" : "manifest", "source_service" : "select", "filter_func" : "data_validation_select", "image_max_width" : "1920", "image_max_height" : "1920", "total_status" : "[0,1,2]" } } ] }, "duration_seconds" : 812, "origin_sample_count" : 18, "add_sample_count" : 0, "modified_sample_count" : 0, "unmodified_sample_count" : 18, "deleted_sample_count" : 0 } ] }

AI开发平台MODELARTS 数据管理（旧版）

AI开发平台MODELARTS-查询数据处理任务的版本列表:URI

URI GET /v2/{project_id}/processor-tasks/{task_id}/versions 表1 路径参数参数是否必选参数类型描述 project_id 是 String 用户项目ID。获取方法请参见获取项目ID和名称。 task_id 是 String 数据处理任务ID。表2 Query参数参数是否必选参数类型描述 limit 否 Integer 指定每一页返回的最大条目数，取值范围[1,100]，默认为100。 offset 否 Integer 分页列表的起始页，默认为0。 order 否 String 指定查询的排序顺序。可选值如下： asc：递增排序 desc：递减排序（默认值） sort_by 否 String 指定查询的排序方式。可选值如下： create_time：按创建时间排序（默认值） version_name：按任务版本名称排序

AI开发平台MODELARTS 数据管理（旧版）

AI开发平台MODELARTS-查询数据处理的算法类别:URI

URI GET /v2/{project_id}/processor-tasks/items 表1 路径参数参数是否必选参数类型描述 project_id 是 String 用户项目ID。获取方法请参见获取项目ID和名称。表2 Query参数参数是否必选参数类型描述 offset 否 Integer 分页列表的起始页，默认为0。 limit 否 Integer 指定每一页返回的最大条目数，取值范围[1,1000]，默认为1000。

AI开发平台MODELARTS 数据管理（旧版）

云服务器内容精选

数据管理

7*24

备案

专业服务

退订

建议反馈

售前咨询热线