检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
多模态类数据集格式要求 文件内容 文件格式 文件样例 多模态理解（预训练） tar+jsonl 允许导入的数据模态参考“文件格式”中显示，由用户购买的特性包许可决定。如果是纯文本，则仅支持标注文件。 如果包含图片，文件需存放在tar包中，存放要求将tar包和标注文件存储在同一目录，并且名称一一对应。
50010108 文件下载错误，HDFS服务不可用。 文件下载错误，HDFS服务不可用。 请检查HDFS服务是否正常，如果正常请联系技术支持。 model.50010109 文件删除错误，HDFS服务不可用。 文件删除错误，HDFS服务不可用。 请检查HDFS服务是否正常，如果正常请联系技术支持。
50020105 文件上传错误，本地路径{0}，HDFS路径{1}。 请检查HDFS服务是否正常，HDFS路径是否正确，如果正常请联系技术支持。 Model.50020201 文件完整性校验失败，文件{0}。 请检查文件是否正常，联系技术支持。 Model.50020202 文件一致性校验失败，文件{0}。
训练场景 文件类型 文件内容 文件格式 文件样例 多模态大模型 预训练 多模态-多模态理解（预训练） 纯文本、图片+描述、图文交织 tar+jsonl文件 如果是纯文本，则仅支持标注文件； 如果包含图片，需要将标注文件中包含的图片打包成tar包，要求tar包和标注文件存储在同一目录
单标签的标签文件示例，如1.txt文件内容如下所示。 猫 多标签的标签文件示例，如2.txt文件内容如下所示。 猫 狗 异常检测数据集标注文件说明 该说明适用于表1中的异常检测标注文件格式。 要求用户将标注文件和图片存于同一文件夹。 当目录下存在对应的txt文件时，以txt文件内容作为正常或异常的标签。
值。 获取训练日志 单击训练任务名称，可以在“日志”页面查看训练过程中产生的日志。 训练日志可以按照不同的节点（训练阶段）进行筛选查看。分布式训练时，任务被分配到多个工作节点上进行并行处理，每个工作节点负责处理一部分数据或执行特定的计算任务。日志也可以按照不同的工作节点（如wor
练过程中产生的日志。 对于训练异常或失败的任务可以通过训练日志定位训练失败的原因。 训练日志可以按照不同的节点（训练阶段）进行筛选查看。分布式训练时，任务被分配到多个工作节点上进行并行处理，每个工作节点负责处理一部分数据或执行特定的计算任务。日志也可以按照不同的工作节点（如wor
知识库介绍 平台提供了知识库功能来对文本文档等数据进行向量化存储、知识检索，支持为应用、工作流提供检索增强能力。无论是文本文档、演示文稿，还是电子表格文件，用户都可以轻松地将数据导入知识库，无需额外的转换或格式处理。 知识库支持导入以下格式的本地文档： 表1 支持的文档格式 文档类型
练过程中产生的日志。 对于训练异常或失败的任务可以通过训练日志定位训练失败的原因。 训练日志可以按照不同的节点（训练阶段）进行筛选查看。分布式训练时，任务被分配到多个工作节点上进行并行处理，每个工作节点负责处理一部分数据或执行特定的计算任务。日志也可以按照不同的工作节点（如wor
练过程中产生的日志。 对于训练异常或失败的任务可以通过训练日志定位训练失败的原因。 训练日志可以按照不同的节点（训练阶段）进行筛选查看。分布式训练时，任务被分配到多个工作节点上进行并行处理，每个工作节点负责处理一部分数据或执行特定的计算任务。日志也可以按照不同的工作节点（如wor
位训练失败的原因。典型训练报错和解决方案请参见NLP大模型训练常见报错与解决方案。 训练日志可以按照不同的节点（训练阶段）进行筛选查看。分布式训练时，任务被分配到多个工作节点上进行并行处理，每个工作节点负责处理一部分数据或执行特定的计算任务。日志也可以按照不同的工作节点（如wor
定位训练失败的原因。典型训练报错和解决方案请参见预测大模型训练常见报错与解决方案。 训练日志可以按照不同的节点（训练阶段）进行筛选查看。分布式训练时，任务被分配到多个工作节点上进行并行处理，每个工作节点负责处理一部分数据或执行特定的计算任务。日志也可以按照不同的工作节点（如wor
租户没有最终租户的桶权限，所以客户在体验中心调用气象大模型时需要默认勾选模型授权。如不授权，会导致结果文件无法写入到obs桶，导致推理失败。 图1 授权读写权限 需要对结果存储目录，与数据目录所在的OBS桶均进行授权。 父主题： 调用科学计算大模型
创建应用。 高性能、低成本 ModelArts Studio大模型开发平台基于昇腾高性能推理框架，支持数据加速、训练加速和推理加速，支持分布式高效训练和推理，提供高性价比算力。 稳固的安全工程 ModelArts Studio大模型开发平台推理服务调用时支持英文等多语种内容安全拦
Studio大模型开发平台为用户提供了丰富的训练工具与灵活的配置选项。用户可以根据实际需求选择合适的模型架构，并结合不同的训练数据进行精细化训练。平台支持分布式训练，能够处理大规模数据集，从而帮助用户快速提升模型性能。该模块提供预训练、全量微调、LoRA微调、DPO等。 模型评测：为了确保模型的实
当前展示的完成本次训练所需要的最低训练单元要求。 单实例训练单元数 选择单实例训练单元数。 实例数 选择实例数。 当实例数大于1，将启动多节点分布式训练。 订阅提醒 订阅提醒 该功能开启后，系统将在任务状态更新时，通过短信或邮件将提醒发送给用户。 发布模型 开启自动发布 开启自动发布后
训练失败的原因。典型训练报错和解决方案请参见科学计算大模型训练常见报错与解决方案。 训练日志可以按照不同的节点（训练阶段）进行筛选查看。分布式训练时，任务被分配到多个工作节点上进行并行处理，每个工作节点负责处理一部分数据或执行特定的计算任务。日志也可以按照不同的工作节点（如wor
期个性化存储能力，并支持通过API、网页多渠道发布，助力开发者高效打造专业级智能体应用。 编排能力 表1 Agent平台编排能力 功能 说明 编排模式 支持用户对话式的快捷调用和创建agent，让业务人员以零代码操作方式，5分钟完成1个原生AI应用创建。 提供灵活的画布式节点编排
日志等文件的存储。 准备ModelArts Studio资源。请参考准备工作。 准备训练数据集。 NLP预训练数据集导入平台前需要按照预处理数据中描述的数据格式进行预处理。 此外，ModelArts Studio平台从OBS导入数据集时，单个文件的大小不能超过50GB，文件个数不受限制，详见文本类数据集格式要求。
定位训练失败的原因。典型训练报错和解决方案请参见CV大模型训练常见报错与解决方案。 训练日志可以按照不同的节点（训练阶段）进行筛选查看。分布式训练时，任务被分配到多个工作节点上进行并行处理，每个工作节点负责处理一部分数据或执行特定的计算任务。日志也可以按照不同的工作节点（如wor
