创建训练作业-华为云

AI开发平台MODELARTS-训练环境中不同规格资源“/cache”目录的大小

训练环境中不同规格资源“/cache”目录的大小在创建训练作业时可以根据训练作业的大小选择资源。 ModelArts会挂载硬盘至“/cache”目录，用户可以使用此目录来储存临时文件。“/cache”与代码目录共用资源，不同资源规格有不同的容量。 k8s磁盘的驱逐策略是90%，所以可以正常使用的磁盘大小应该是“cache目录容量 x 0.9”。裸机的本地磁盘为物理磁盘，无法扩容，若存储的数据量大，建议使用SFS存放数据，SFS支持扩容。 GPU规格的资源表1 GPU cache目录容量 GPU规格 cache目录容量 V100 800G 8*V100 3T P100 800G CPU规格的资源表2 CPU cache目录容量 CPU规格 cache目录容量 2 核 8GiB 50G 8 核 32GiB 50G Ascend规格的资源表3 Ascend cache目录容量 Ascend规格 cache目录容量 Ascend 3T 父主题：创建训练作业

AI开发平台MODELARTS 创建训练作业

AI开发平台MODELARTS-训练作业参数填写应该注意什么？

训练作业参数填写应该注意什么？训练作业参数填写需要您注意以下几点：如果已配置算法来源和数据来源，则下方的运行参数，将根据选择的对象自动填写“data_url”，无法直接在运行参数中直接修改。图1 自动填充的运行参数在创建训练作业配置运行参数时，只需要填写对应的参数与参数值，如图2所示。图2 配置运行参数训练作业中的参数值为OBS桶路径时，需要使用数据对应的路径，且以“obs://”开头。如图3所示。图3 配置参数OBS路径在代码中创建OBS文件夹时，需要调用MoXing的API，具体方法如下： import moxing as mox mox.file.make_dirs('obs://bucket_name/sub_dir_0/sub_dir_1') 父主题：创建训练作业

AI开发平台MODELARTS 创建训练作业

AI开发平台MODELARTS-创建训练作业时出现“实例挂卷失败”的事件:处理步骤

处理步骤进入训练作业详情页，在左侧获取SFS Turbo的名称。图1 获取SFS Turbo的名称登录弹性文件服务SFS控制台，在SFS Turbo列表找到训练作业挂载的SFS Turbo，单击名称进入详情页。获取VPC信息、安全组信息和endpoint信息。 VPC信息：SFS Turbo详情页的“虚拟私有云”。安全组信息：SFS Turbo详情页的“安全组”。 endpoint信息：SFS Turbo详情页的“共享路径”，去除“:/”即为sfs-turbo-endpoint。例如共享路径为“4ab556b5-d689-44f1-9302-24c09daxxxxc.sfsturbo.internal:/”，则sfs-turbo-endpoint为“4ab556b5-d689-44f1-9302-24c09daxxxxc.sfsturbo.internal”。查看SFS Turbo的VPC网段是否满足如下2个条件。条件一：SFS Turbo网段不能与192.168.20.0/24重叠，否则会和专属资源池的网段发生冲突，因为专属资源池的默认网段为192.168.20.0/24。专属资源池实际使用的网段可以在资源池的详情页面查看“网络”获取。条件二：SFS Turbo网段不能与172网段重叠，否则会和容器网络发生冲突，因为容器网络使用的是172网段。若不满足条件，则修改SFS Turbo的VPC网段，推荐网段为10.X.X.X。具体操作请参见修改虚拟私有云网段。若满足条件，则继续下一步。查看SFS Turbo的VPC网段的安全组是否被限制了。在所选专属资源池中新建一个未挂载的SFS Turbo的训练作业，当训练作业处于“运行中”时，通过Cloud Shell功能登录训练作业worker-0实例，使用curl {sfs-turbo-endpoint}:{port}命令检查port是否正常打开，SFS Turbo所需要入方向的端口号为111、445、2049、2051、2052、20048，具体请参见创建文件系统的“安全组”参数。Cloud Shell功能的操作指导请参见使用CloudShell登录训练容器。是，则修改安全组的配置，具体操作请参见修改安全组规则。否，则继续下一步。确认SFS Turbo是否存在异常。新建一个和SFS Turbo在同一个网段的ECS，用ECS去挂载SFS Turbo，如果挂载失败，则表示SFS Turbo异常。是，联系SFS服务的技术支持处理。否，联系ModelArts的技术支持处理。

AI开发平台MODELARTS 专属资源池创建训练作业

AI开发平台ModelArts-训练作业一直在等待中（排队）？

训练作业一直在等待中（排队）？训练作业状态一直在等待中状态表示当前所选的资源池规格资源紧张，作业需要进行排队，请耐心等待。如想降低排队时间，根据您所选资源池的类型，有以下建议：公共资源池：公共资源池资源较少，高峰期如举办相关活动时会存在资源不足情况。有以下方法可以尝试：如果使用的是免费规格，可以换成收费规格，免费规格资源较少，排队概率高。规格选择卡数尽量少，如可以选择1卡，相比于选择8卡排队几率大大降低。可以尝试使用其他Region（如北京四切换为上海一）。如果有长期的资源使用诉求，可以购买独占使用的专属资源池。专属资源池：如有多个可用的专属资源池，可尝试选择其他较为空闲的资源池。可清理当前资源池下的其他资源，如停止长时间不使用的Notebook。在非高峰期时提交训练作业。如长期长时间排队可以联系该专属资源池的帐号管理员，管理员可根据使用情况对资源池进行扩容。相关问题：为什么资源充足还是在排队？父主题：创建训练作业

AI开发平台ModelArts 创建训练作业

云服务器内容精选

创建训练作业

7*24

备案

专业服务

退订

建议反馈

售前咨询热线