云服务器内容精选

  • 新旧版Notebook使用存储差异说明 表1 新版旧版Notebook支持的存储配置说明 存储类型 旧版Notebook 新版Notebook 说明 OBS对象存储服务 支持 不支持 OBS为存储系统,而非文件系统。 在旧版Notebook使用过程中,OBS数据的远程复制以及本地复制容易混淆,造成用户对数据操作难以控制。因此,在新版Notebook中去掉了挂载OBS能力,用户可以通过代码操作OBS数据,灵活的获取和操作数据。 OBS并行文件系统 不支持 支持 新版Notebook提供了动态挂载OBS并行文件系统能力,用户在启动的Notebook详情页面中,可以添加数据存储。不涉及新旧版Notebook间的数据迁移。 云硬盘EVS 支持 支持 新旧版Notebook均支持使用,需要迁移保存旧版Notebook中的数据。 弹性文件服务SFS 不支持 支持 在专属资源池场景下使用。旧版Notebook中该功能已经下线,不涉及迁移。
  • 旧版Notebook使用EVS存储 旧版Notebook使用的是云硬盘EVS存储,建议将EVS中的数据保存并迁移,在新版Notebook中使用。 EVS存储中数据量较少:建议将数据下载到本地,创建新版Notebook后再上传。 EVS存储中数据量较大:建议将EVS中的数据上传至OBS桶中保存。创建新版Notebook时,通过OBS桶读取数据使用。 Notebook中的数据上传下载的具体操作请参见: Notebook中的数据上传下载。
  • 部署服务如何选择计算节点规格? 部署服务时,用户需要指定节点规格进行服务部署,界面目前显示的节点规格是ModelArts根据用户的AI应用和资源池的节点规格计算得到,用户可以选择ModelArts提供的规格,也可以使用自定义规格(公共资源池不支持)。 计算节点规格主要是根据用户AI应用实际需要的资源进行选择,如AI应用正常运行需要3U10G的资源,那么需要选择大于3U10G的计算节点规格。确保服务能够部署成功正常运行。 图1 选择计算节点规格 规格的使用注意事项如下: 1、权限控制 通用的计算节点规格是未做权限控制的,如modelarts.vm.cpu.2u,只要资源池有资源,就可以选择使用。ModelArts默认提供两个规格:CPU:modelarts.vm.cpu.2u和GPU:modelarts.vm.gpu.p4。 一些特殊的规格需要联系系统管理员增加权限。 2、公共资源池的规格无法选择 共享池的资源是有限的,显示置灰表示当前规格的资源已经被用完。请选择未置灰的规格,也可以创建自己的专属资源池。 3、自定义规格 只有在专属资源池部署服务时,支持自定义资源规格。公共资源池部署服务不支持。 图2 自定义规格 4、免费规格 只有公共资源池支持使用免费节点规格。免费规格有使用数量和使用时长的限制。目前仅在“华北-北京四”区域提供了免费规格。 父主题: 功能咨询
  • 开发环境中不同Notebook规格资源“/cache”目录的大小 创建Notebook时,可以根据业务数据量的大小选择资源。 ModelArts会挂载硬盘至“/cache”目录,用户可以使用此目录来储存临时文件。“/cache”与代码目录共用资源,不同资源规格有不同的容量。 映射规则:当前不支持CPU配置cache盘;GPU与昇腾资源为单卡时,cache目录保持500G大小限制;除单卡外,cache盘大小与卡数有关,计算方式为卡数*500G,上限为3T。详细表1所示。 表1 不同Notebook规格资源“/cache”目录的大小 规格类别 cache盘大小 GPU-0.25卡 500G*0.25 GPU-0.5卡 500G*0.5 GPU-单卡 500G GPU-双卡 500G*2 GPU-四卡 500G*4 GPU-八卡 3T 昇腾-单卡 500G 昇腾-双卡 500G*2 昇腾-四卡 500G*4 昇腾-八卡 3T CPU -- 父主题: 更多功能咨询
  • JupyterLab目录的文件、Terminal的文件和OBS的文件之间的关系 JupyterLab目录的文件与Terminal中work目录下的文件相同。即用户在Notebook中新建的,或者是从OBS目录中同步的文件。 挂载OBS存储的Notebook,JupyterLab目录的文件可以与OBS的文件进行同步,使用JupyterLab文件上传下载功能。Terminal的文件与JupyterLab目录的文件相同。 挂载EVS存储的Notebook,JupyterLab目录的文件可使用Moxing接口或SDK接口,读取OBS中的文件。Terminal的文件与JupyterLab目录的文件相同。 父主题: 更多功能咨询
  • 欠拟合的解决方法有哪些? 模型复杂化。 对同一个算法复杂化。例如回归模型添加更多的高次项,增加决策树的深度,增加神经网络的隐藏层数和隐藏单元数等。 弃用原来的算法,使用一个更加复杂的算法或模型。例如用神经网络来替代线性回归,用随机森林来代替决策树。 增加更多的特征,使输入数据具有更强的表达能力。 特征挖掘十分重要,尤其是具有强表达能力的特征,可以抵过大量的弱表达能力的特征。 特征的数量并非重点,质量才是,总之强表达能力的特征最重要。 能否挖掘出强表达能力的特征,还在于对数据本身以及具体应用场景的深刻理解,这依赖于经验。 调整参数和超参数。 神经网络中:学习率、学习衰减率、隐藏层数、隐藏层的单元数、Adam优化算法中的β1和β2参数、batch_size数值等。 其他算法中:随机森林的树数量,k-means中的cluster数,正则化参数λ等。 增加训练数据作用不大。 欠拟合一般是因为模型的学习能力不足,一味地增加数据,训练效果并不明显。 降低正则化约束。 正则化约束是为了防止模型过拟合,如果模型压根不存在过拟合而是欠拟合了,那么就考虑是否降低正则化参数λ或者直接去除正则化项。 父主题: 功能咨询
  • 如何在ModelArts上获得RANK_TABLE_FILE进行分布式训练? ModelArts会帮用户生成RANK_TABLE_FILE文件,可通过环境变量查看文件位置。 在Notebook中打开terminal,可以运行如下命令查看RANK_TABLE_FILE: 1 env | grep RANK 在训练作业中,您可以在训练启动脚本的首行加入如下代码,把RANK_TABLE_FILE的值打印出来: 1 os.system('env | grep RANK') 父主题: 功能咨询
  • 为什么选择不了Ascend Snt3资源? 由于Ascend Snt3资源有限,当资源售罄后,您在部署上线时,无法选择Ascend Snt3资源(公共资源池)进行推理,即在部署页面中,“Ascend: 1* Snt3 (8GB) | ARM: 3 核 6GB”资源为灰色,无法选择。 解决方案: 方法1:如果您希望使用公共资源池下的Ascend Snt3,可以等待其他用户释放,即其他使用Ascend Snt3芯片的服务停止,您即可选择此资源进行部署上线。 方法2:如果专属资源池还有Ascend Snt3资源,您可以创建一个Ascend Snt3专属资源池使用。 方法3:如果专属资源池的Ascend Snt3资源也已售罄,则需等待其他用户删除Ascend Snt3实例后,您才可以创建Ascend Snt3的专属资源池进行使用。 父主题: 功能咨询
  • 训练作业的自定义镜像如何安装Moxing? 为避免自动安装Moxing会影响用户自定义镜像中的包环境,所以自定义镜像需要用户手动安装Moxing。Moxing安装包会在作业启动后放在“/home/ma-user/modelarts/package/”目录下。可在使用Moxing功能前执行如下代码,进行Moxing的安装。 import os os.system("pip install /home/ma-user/modelarts/package/moxing_framework-*.whl") 本案例仅适用于训练作业环境。 父主题: 功能咨询
  • CDN支持DNS,HTTPDNS,IP302这三种调度方式吗? CDN支持DNS、HTTPDNS、IP302调度方式。您可以自行配置DNS解析调度,HTTPDNS、IP302调度方式需要提工单申请开通。三种调度方式的不同请见下表: 调度方式 说明 DNS DNS系统是天然的分布式结构,客户端本机、LDNS都可以实现cache,架构本身就能实现高的伸缩性和性能。采用DNS调度方式时,CDN根据Local DNS的地址判断客户端位置,就近调度。 HTTPDNS 采用HTTPDNS这项技术使得用户终端可以绕开运营商的Local DNS,直接采用HTTP协议去访问调度系统,请求所需要访问的域名的最优接入节点,这样可以避免DNS劫持所带来的业务安全问题。 IP302 IP302可以直接得到客户端IP和内容的地址,可以做到基于内容和精确IP的精确调度。 父主题: 功能咨询
  • DDoS原生标准版、DDoS原生防护-全力防基础版、DDoS原生防护-全力防高级版功能规格有哪些差异? DDoS原生高级防护支持DDoS原生标准版、DDoS原生防护-全力防基础版、DDoS原生防护-全力防高级版三种服务版本。各服务版本的功能规格说明,请参见表1。 DDoS原生高级防护只能防护相同区域的云资源,不能跨区域(Region)防护。 表1 DDoS原生高级防护业务规格 规格 规格说明 DDoS原生标准版 DDoS原生防护-全力防基础版 DDoS原生防护-全力防高级版 计费模式 - 1个月 支持“3个月”、“6个月”或“1年” 支持“3个月”、“6个月”或“1年” 带宽类型 - 华为云原生网络,多线BGP 华为云原生网络,多线BGP 华为云原生网络,多线BGP 防护能力 - 20G 共享全力防护,不低于20G 共享全力防护,最高可达1T 防护IP数 每个实例支持防护的公网IP个数。 1个 范围为50~500,且防护IP数必须设置为5的倍数 范围为50~500,且防护IP数必须设置为5的倍数 防护次数 公网IP被攻击,实例进行防护的次数。 有关防护次数的统计方式说明,请参见DDoS原生防护标准版的防护次数是如何统计的?。 10次(超过10次后将不再防护) 不限次数 不限次数 IP更换次数 - 5次 防护包中IP每天可以更换一次,每月更换5次 - - 业务带宽 高防机房清洗后回源给源站的业务流量带宽。 默认提供100M业务带宽。 最低100M,最大支持上限20,000M。 最大支持40,000M。 父主题: 功能咨询
  • 不启用自动停止,系统会自动停掉Notebook实例吗?会删除Notebook实例吗? 针对此问题,需要根据选择的不同资源规格进行说明。 如果使用免费规格,Notebook实例将在运行1小时后,自动停止。如果72小时内没有再次启动,会释放资源,即删除此Notebook实例。因此使用免费规格时,关注运行时间并注意文件备份。 如果使用收费的公共资源池,未启用自动停止功能时,Notebook实例不会自动停止,且不会被删除。 如果使用专属资源池,Notebook实例也不会自动停止。但是如果专属资源池被删除,则会导致此Notebook实例不可用。 父主题: 更多功能咨询
  • DDoS原生标准版、DDoS原生防护-全力防基础版、DDoS原生铂金版功能规格有哪些差异? DDoS原生高级防护支持DDoS原生标准版、DDoS原生防护-全力防基础版、DDoS原生铂金版三种服务版本。各服务版本的功能规格说明,请参见表1。 DDoS原生高级防护只能防护相同区域的云资源,不能跨区域(Region)防护。 表1 DDoS原生高级防护业务规格 规格 规格说明 DDoS原生标准版 DDoS原生防护-全力防基础版 DDoS原生防护-全力防高级版 DDoS原生铂金版 计费模式 - 1个月 支持“3个月”、“6个月”或“1年” 支持“3个月”、“6个月”或“1年” 支持1个月~1年 带宽类型 - 华为云原生网络,多线BGP 华为云原生网络,多线BGP 华为云原生网络,多线BGP 华为云原生网络,多线BGP 防护能力 - 20G 共享全力防护,不低于20G 共享全力防护,最高可达1.5T 共享全力防护,最高可达1.5T 防护资源所在区域 - 华北-北京四 华东-上海一 华南-广州 华北-北京四 华东-上海一 华南-广州 西南-贵阳一 华北-北京一 华北-北京二 华北-北京四 华东-上海一 华南-广州 华北-北京一 华北-北京二 华北-北京四 华东-上海一 防护类型 - - - - 常驻防护 防护IP数 每个实例支持防护的公网IP个数。 1个 范围为50~500,且防护IP数必须设置为5的倍数 范围为50~500,且防护IP数必须设置为5的倍数 范围为1~256 如果购买多个IP,该IP组共享保底带宽和弹性带宽。 防护次数 公网IP被攻击,实例进行防护的次数。 有关防护次数的统计方式说明,请参见DDoS原生专业版的防护次数是如何统计的?。 10次(超过10次后将不再防护) 不限次数 不限次数 不限次数 IP更换次数 - 5次 防护包中IP每天可以更换一次,每月更换5次 - - - 业务带宽 高防机房清洗后回源给源站的业务流量带宽。 默认提供100M业务带宽。 最低100M,最大支持上限20,000M。 最大支持40,000M。 最大支持40,000M。 父主题: 功能咨询