设置工作空间名称为“test-workspace”,授权类型为“internal”,授权的IAM用户名称为“test”。
表7 workspace定义结构说明 参数 是否必选 参数类型 说明 id 否 String 工作空间id。未创建工作空间时取值默认值为0,存在创建并使用的工作空间,以实际取值为准。
表18 workspace字段数据结构说明 参数 参数类型 说明 id String 工作空间ID。 表19 queuing_info参数说明 参数 参数类型 描述 id String 实例ID。 name String 实例名称。
使用案例 在华为云MRS服务下查看自己账号下可用的MRS集群,如果没有,则需要创建,当前需要集群有Spark组件,安装时,注意勾选上。 您可以使用MrsStep来创建作业类型节点。定义MrsStep示例如下。
如果您的华为云账号已经升级为华为账号,则账号认证方式将不可用,请创建一个IAM用户,使用IAM用户认证。 用户AK-SK认证模式 本地安装完成ModelArts SDK后,可通过用户AK-SK认证模式进行Session鉴权。
在节点执行命令查看驱动是否加载成功,如果返回如下信息则加载成功,否则请联系华为工程师处理。 npu-smi info 图3 查看驱动是否加载成功 父主题: Lite Server插件管理
登录华为云管理控制台。 在左侧服务列表中,单击“网络 > 弹性公网IP EIP”,进入弹性公网IP页面。 在弹性公网IP页面右上角单击“购买弹性公网IP”。 参数配置可使用默认值,单击“立即购买”。
workspace_id 否 String 指定作业所处的工作空间,默认值为“0”。 表3 config属性列表 参数 是否必选 参数类型 说明 worker_server_num 是 Integer 训练作业worker的个数。
图7 登录节点 方式2:通过华为云自带的远程登录功能 使用华为云账号登录CCE管理控制台。 在CCE集群详情页面,单击“节点管理”页签,在“节点”页签中单击需要登录的节点名称,跳转至弹性云服务器页面。
workspace_id String 工作空间ID。未创建工作空间时默认值为“0”,存在创建并使用的工作空间,以实际取值为准。 model_status String 模型状态。 market_flag Boolean 标识模型是否来自市场。
modelarts:workspace:getQuota 查询工作空间配额。如果开通了工作空间功能,则需要配置此权限。 modelarts:tag:list 在训练作业中使用标签管理服务TMS。
表2 Query参数 参数 是否必选 参数类型 描述 workspace_id 否 String 工作空间ID。未创建工作空间时默认值为“0”,存在创建并使用的工作空间,以实际取值为准。
本示例使用华为开源镜像站提供的pip源,其pip.conf文件内容如下。
由于AI机型规格相对较大,资源池所需的ECS实例数、内存大小、CPU核数和EVS硬盘大小很可能会超出华为云默认提供的资源配额,因此需要申请扩大配额。请先联系客户经理确认资源配额提升具体方案,再参考本章节申请扩大配额。 登录华为云管理控制台。
昇腾芯片 昇腾芯片又叫Ascend芯片,是华为自主研发的高计算力低功耗的AI芯片。 资源池 ModelArts提供的大规模计算集群,可应用于模型开发、训练和部署。支持公共资源池和专属资源池两种,分别为共享资源池和独享资源池。
将您的租户名ID和IAM用户名ID提供给华为技术支持,技术支持将根据您提供的信息,为您配置OBS桶策略,以便用户收集的日志可以上传至对应的OBS桶。 技术支持配置完成后,会给您提供对应的OBS桶目录“obs_dir”,该目录用于后续配置的脚本中。
workspace_id String 参数解释:工作空间ID。未创建工作空间时默认值为“0”,存在创建并使用的工作空间,以实际取值为准。 取值范围:不涉及。 flavor_type String 参数解释:镜像的资源类型。
workspace_id String 参数解释:工作空间ID。未创建工作空间时默认值为“0”,存在创建并使用的工作空间,以实际取值为准。 取值范围:不涉及。 flavor_type String 参数解释:镜像的资源类型。
如果需要升级或修改,请联系华为云技术支持。 ModelArts Lite Server使用ECS服务器时不支持重装操作系统,部分区域使用裸金属服务器时也不支持重装操作系统,如果您想重装操作系统,您可通过切换操作系统的方式解决。
workspace_id String 参数解释:工作空间ID。未创建工作空间时默认值为“0”,存在创建并使用的工作空间,以实际取值为准。 取值范围:不涉及。 flavor_type String 参数解释:镜像的资源类型。