AI开发平台MODELARTS-已有镜像如何适配迁移至ModelArts训练平台

时间：2024-04-30 17:31:40

AI开发平台MODELARTS 准备训练镜像

已有镜像如何适配迁移至ModelArts训练平台

已有镜像迁移至训练管理需要关注如下步骤。

为镜像增加训练管理的默认用户组ma-group，“gid = 100”。

如果已存在“gid = 100”用户组，可能会报错“groupadd: GID '100' already exists”。可通过命令“cat /etc/group | grep 100”查询是否已存在gid = 100用户组。

如果已存在“gid = 100”用户组，则该步骤跳过，下文Dockerfile中删除“RUN groupadd ma-group -g 100”命令。
为镜像增加训练管理的默认用户ma-user，“uid = 1000”。

如果已存在“uid = 1000”用户，可能会报错“useradd: UID 1000 is not unique”。可通过命令“cat /etc/passwd | grep 1000”查询是否已存在uid = 1000用户。

如果已存在“uid = 1000”用户，则该步骤跳过，下文Dockerfile中删除“RUN useradd -d /home/ma-user -m -u 1000 -g 100 -s /bin/bash ma-user”命令。
修改镜像中相关文件权限，使得ma-user，“uid = 1000”用户可读写。

您可以参考如下Dockerfile，修改已有镜像，使其符合新版训练管理自定义镜像的规范。

FROM {已有镜像}

USER root

# 如果已存在 gid = 100 用户组，则删除 groupadd 命令。
RUN groupadd ma-group -g 100
# 如果已存在 uid = 1000 用户，则删除 useradd 命令。
RUN useradd -m -d /home/ma-user -s /bin/bash -g 100 -u 1000 ma-user

# 修改镜像中相关文件权限，使得 ma-user, uid = 1000 用户可读写。
RUN chown -R ma-user:100 {Python软件包路径}

# 设置容器镜像预置环境变量。
# 请务必设置 PYTHONUNBUFFERED=1, 以免日志丢失。
ENV PYTHONUNBUFFERED=1

# 设置容器镜像默认用户与工作目录。
USER ma-user
WORKDIR /home/ma-user

编写好Dockerfile后，通过执行如下所示命令进行新镜像构建。

docker build -f Dockerfile . -t {新镜像}

构建成功后将新镜像上传至SWR（参考如何登录并上传镜像到SWR）。

上述内容为关键代码样例，为了方便理解迁移过程，推荐您体验完整迁移案例：示例：从0到1制作自定义镜像并用于训练（PyTorch+CPU/GPU）。

父主题： 准备训练镜像

上一篇：AI开发平台MODELARTS-Step2 构建成功的镜像注册到镜像管理模块

下一篇：AI开发平台MODELARTS-Notebook基础镜像ARM TenSorFlow:镜像一：tensorflow1.15-mindspore1.7.0-cann5.1.0-euler2.8-aarch64

AI开发平台MODELARTS-已有镜像如何适配迁移至ModelArts训练平台

意见反馈

0/200

提交取消

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

AI开发平台MODELARTS-已有镜像如何适配迁移至ModelArts训练平台

AI开发平台MODELARTS-已有镜像如何适配迁移至ModelArts训练平台

已有镜像如何适配迁移至ModelArts训练平台

7*24

备案

专业服务

退订

建议反馈

售前咨询热线