工作负载-华为云

华为云UCS-有状态负载:创建有状态负载

创建有状态负载登录UCS控制台，在左侧导航栏中选择“容器舰队”。在“容器舰队”页签下找到已开通集群联邦的舰队，单击名称进入详情页。在左侧导航栏中选择“工作负载”，切换至“有状态负载”页签，并单击右上角“镜像创建”。若使用已有的YAML创建工作负载，请单击右上角“YAML创建”。设置工作负载基本信息。负载类型：选择“有状态负载”。负载名称：新增工作负载的名称，命名必须唯一。命名空间：选择工作负载所在命名空间。如需新建命名空间，请参见创建命名空间。描述：工作负载的描述信息。实例数量：设置多集群的工作负载中各集群的实例数。用户可以设置具体实例个数，默认为2。每个工作负载实例都由相同的容器部署而成。在UCS中可以通过设置弹性扩缩容策略，根据工作负载资源使用情况，动态调整工作负载实例数。设置工作负载容器配置。 Pod中可以配置多个容器，您可以单击右侧“添加容器”为Pod配置多个容器并分别进行设置。图1 容器配置基本信息：表1 基本信息参数说明参数说明容器名称为容器命名。镜像名称单击后方“选择镜像”，选择容器使用的镜像。我的镜像：当前区域下华为云镜像仓库中的镜像。若无可用的镜像，可单击“上传镜像”进行上传。镜像中心：开源镜像仓库中的官方镜像。共享镜像：由他人账号共享的私有镜像，详情请参见共享私有镜像。镜像版本选择需要部署的镜像版本。更新策略镜像更新/拉取策略。勾选“总是拉取镜像”表示每次都从镜像仓库拉取镜像；如不勾选则优先使用节点已有的镜像，如果没有这个镜像再从镜像仓库拉取。 CPU配额申请：容器需要使用的最小CPU值，默认0.25Core。限制：允许容器使用的CPU最大值。建议设容器配额的最高限额，避免容器资源超额导致系统故障。内存配额申请：容器需要使用的内存最小值，默认512MiB。限制：允许容器使用的内存最大值。如果超过，容器会被终止。关于CPU/内存配额申请和限制的具体说明请参见设置容器规格。初始化容器选择容器是否作为初始化容器。 Init 容器是一种特殊容器，在 Pod 内的应用容器启动之前运行。详细说明请参见Init 容器。生命周期：设置生命周期回调函数可在容器的特定阶段执行调用，比如容器在停止前希望执行某项操作，就可以设置相应的函数。目前提供的生命周期回调函数有启动命令、启动后处理、停止前处理，详情请参见设置容器生命周期。健康检查：设置健康检查可以在容器运行过程中定时检查容器的健康状况，详情请参见设置容器健康检查。环境变量：容器运行环境中设定的一个变量，通过环境变量设置的配置项不会随着Pod生命周期结束而变化，详情请参见设置环境变量。数据存储：配置容器存储，可以使用本地存储和存储卷声明（PVC）。建议使用PVC将工作负载Pod数据存储在云存储上。若存储在本地磁盘上，节点异常无法恢复时，本地磁盘中的数据也将无法恢复。容器存储相关内容请参见容器存储。安全设置：对容器权限进行设置，保护系统和其他容器不受其影响。请输入用户ID，容器将以当前用户权限运行。镜像访问凭证：用于访问镜像仓库的凭证。该凭证仅访问私有镜像仓库时使用，如所选镜像为公开镜像，则无需选择密钥。密钥的创建方法请参见创建密钥。设置工作负载实例间发现服务配置。 StatefulSet实例间发现通过无头服务（Headless Service）实现，无头服务并不会分配 Cluster IP，并且查询会返回所有Pod的DNS记录，这样就可查询到所有Pod的IP地址。 Service名称：输入工作负载所对应的服务名称，用于集群内工作负载间的互相访问。该服务主要用于实例的内部发现，不需要有单独的IP地址，也不需要做负载均衡。端口配置：端口名称：端口名称用于给容器端口命名，通常以端口用途命名。服务端口：输入服务端口。容器端口：输入容器的监听端口。（可选）单击服务配置栏的，进行工作负载服务配置。若工作负载需要和其它服务互访，或需要被公网访问，您需要添加服务（Service），设置访问方式。工作负载访问的方式决定了这个工作负载的网络属性，不同访问方式的工作负载可以提供不同网络能力，操作详情请参见服务与路由。您也可以在创建完工作负载之后再创建Service，参见集群内访问（ClusterIP）和节点访问（NodePort）。 Service名称：新增服务名称，用户可自定义，服务名称必须唯一。访问类型：集群内访问（ClusterIP）：只能集群内访问服务。节点访问（NodePort）：可以通过集群内任意节点访问到服务。服务亲和（仅节点访问设置）：集群级别：集群下所有节点的IP+访问端口均可以访问到此服务关联的负载，服务访问会因路由跳转导致一定性能损失，且无法获取到客户端源IP。节点级别：只有通过负载所在节点的IP+访问端口才可以访问此服务关联的负载，服务访问没有因路由跳转导致的性能损失，且可以获取到客户端源IP。端口配置：协议：TCP或UDP，请根据业务的协议类型选择。服务端口：容器端口映射到集群虚拟IP上的端口，用虚拟IP访问应用时使用，端口范围为1-65535，可任意指定。容器端口：容器镜像中应用程序实际监听的端口，需用户确定。例如：nginx程序实际监听的端口为80。节点端口（仅节点访问设置）：容器端口映射到节点私有IP上的端口，用私有IP访问应用时使用，端口范围为30000-32767，建议选择“自动生成”。自动生成：系统会自动分配端口号。指定端口：指定固定的节点端口，默认取值范围为30000-32767。若指定端口时，请确保同个集群内的端口唯一性。（可选）单击“展开高级配置”，设置工作负载高级配置。升级策略：指定有状态负载的升级方式，包括整体替换升级和逐步滚动升级，详细参数说明请参见配置工作负载升级策略。滚动升级：滚动升级将逐步用新版本的实例替换旧版本的实例，升级的过程中，业务流量会同时负载均衡分布到新的和旧的实例上，因此业务不会中断。替换升级：有状态工作负载的替换升级，需要手动删除旧实例，再创建新实例。升级过程中业务会中断。实例管理策略：有序策略：默认实例管理策略，有状态负载会逐个的、按顺序的进行部署、删除、伸缩实例, 只有前一个实例部署Ready或者删除完成后，有状态负载才会操作后一个实例。并行策略：支持有状态负载并行创建或者删除所有的实例，有状态负载发生变更时立刻在实例上生效。调度策略：您可设置亲和（affinity）与反亲和（anti-affinity）实现Pod的计划性调度，详细信息请参见配置调度策略（亲和与反亲和）。标签与注解：您可以单击“添加”为Pod增加标签或注解，新增标签或注解的键不能与已有的重复。单击“下一步”，对选择的集群进行调度与差异化配置。在选择可调度集群后，可对容器进行“差异化配置”。集群调度策略：调度方式：复制分发：工作负载将在勾选的所有集群中进行部署。部署集群：单击集群即可将其勾选为工作负载可调度的集群，集群个数请您根据自身业务进行确定。差异化配置：工作负载在不同的集群中部署可进行差异化的配置。在选择可调度集群后单击对应集群右上角，即可对每个集群进行差异化配置，差异化后的容器配置只对该集群生效。具体参数说明请参见容器配置。设置完成后，单击“创建工作负载”完成创建。

华为云UCS 创建工作负载

华为云UCS-无状态负载:工作负载基本概念

工作负载基本概念无状态工作负载（即Kubernetes中的Deployment）：实例之间完全独立、功能相同，具有弹性伸缩、滚动升级等特性。如：nginx、wordpress，创建无状态工作负载请参见创建无状态工作负载。有状态工作负载（即Kubernetes中的StatefulSet）：实例之间不完全独立，具有稳定的持久化存储和网络标示，以及有序的部署、收缩和删除等特性。如：mysql-HA、etcd，创建有状态工作负载请参见创建有状态工作负载。守护进程集（即Kubernetes中的DeamonSet）：在集群的每个节点上运行一个Pod，且保证只有一个Pod，适合一些系统层面的应用，如日志收集、资源监控等，创建守护进程集请参见创建守护进程集。

华为云UCS 工作负载

云容器引擎 CCE-管理工作负载和任务:日志

日志您可以通过“日志”功能查看无状态工作负载、有状态工作负载、守护进程集、普通任务的日志信息。本文以无状态工作负载为例说明如何查看日志。查看日志前请将浏览器与后端服务器时间调成一致。登录CCE控制台，进入一个已有的集群，在左侧导航栏中选择“工作负载”。选择“无状态负载”页签，单击工作负载后的“日志”。在弹出的“日志”窗口中可以查看容器日志信息。图2 查看无状态工作负载日志当前显示的日志内容为容器标准输出日志，不具备持久化和高阶运维能力，如需使用更完善的日志能力，可使用日志管理功能。如工作负载开启了AOM采集标准输出的功能（默认开启），可前往AOM查阅更多的负载日志，详情请参见通过ICAgent采集容器日志（不推荐）。

云容器引擎 CCE 工作负载

云容器引擎 CCE-管理工作负载和任务:事件

事件本文以无状态工作负载为例说明如何使用事件功能。任务或定时任务中的事件功能可直接单击工作负载操作栏中的“事件”按钮查看。登录CCE控制台，进入一个已有的集群，在左侧导航栏中选择“工作负载”。选择“无状态负载”页签，单击工作负载名称，可在“实例列表”中单击某个实例的“事件”按钮，查看该工作负载或具体实例的事件名称、事件类型、发生次数、Kubernetes事件、首次和最近发生的时间。事件保存时间为1小时，1小时后自动清除数据。

云容器引擎 CCE 工作负载

云容器引擎 CCE-管理工作负载和任务:升级

升级您可以通过CCE控制台实现无状态工作负载、有状态工作负载、守护进程集的快速升级。本文以无状态工作负载为例说明如何进行升级。若需要更换镜像或镜像版本，您需要提前将镜像上传到容器镜像服务，上传方法请参见通过Docker客户端上传镜像。登录CCE控制台，进入一个已有的集群，在左侧导航栏中选择“工作负载”。选择“无状态负载”页签，单击待升级工作负载后的“升级”。暂不支持批量升级多个工作负载。有状态工作负载升级时，若升级类型为替换升级，需要用户手动删除实例后才能升级成功，否则界面会始终显示“处理中”。请根据业务需求进行工作负载的升级，参数设置方法与创建工作负载时一致。更新完成后，单击“升级工作负载”，并手动确认YAML文件差异后提交升级。

云容器引擎 CCE 工作负载

云容器引擎 CCE-管理工作负载和任务:监控

监控您可以通过CCE控制台查看工作负载和容器组的CPU和内存占用情况，以确定需要的资源规格。本文以无状态工作负载为例说明如何使用监控功能。登录CCE控制台，进入一个已有的集群，在左侧导航栏中选择“工作负载”。选择“无状态负载”页签，单击已创建工作负载后的“监控”。在监控页面，可查看工作负载的CPU利用率和物理内存使用率。图1 查看无状态工作负载监控单击工作负载名称，可在“实例列表”中单击某个实例的“监控”按钮，查看相应实例的CPU使用率、内存使用率。

云容器引擎 CCE 工作负载

云容器引擎 CCE-管理工作负载和任务:操作场景

操作场景工作负载创建后，您可以对其执行升级、编辑YAML、日志、监控、回退、删除等操作。表1 工作负载/任务管理操作描述监控可以通过CCE控制台查看工作负载和容器组的CPU和内存占用情况，以确定需要的资源规格。日志可查看工作负载的日志信息。升级可以通过更换镜像或镜像版本实现无状态工作负载、有状态工作负载、守护进程集的快速升级，业务无中断。编辑YAML 可通过在线YAML编辑窗对无状态工作负载、有状态工作负载、守护进程集、定时任务和容器组的YAML文件进行修改和下载。普通任务的YAML文件仅支持查看、复制和下载。说明：如果对已有的定时任务（CronJob）进行修改，修改之后运行的新Pod将使用新的配置，而已经运行的Pod将继续运行不会发生任何变化。回退无状态工作负载可以进行回退操作，仅无状态工作负载可用。重新部署工作负载可以进行重新部署操作，重新部署后将重启负载下的全部容器组Pod。关闭/开启升级无状态工作负载可以进行关闭/开启升级操作，仅无状态工作负载可用。标签管理标签是以key/value键值对的形式附加在工作负载上的。添加标签后，可通过标签对工作负载进行管理和选择。任务或定时任务无法使用标签管理功能。删除若工作负载无需再使用，您可以将工作负载或任务删除。工作负载或任务删除后，将无法恢复，请谨慎操作。事件查看具体实例的事件名称、事件类型、发生次数、Kubernetes事件、首次和最近发生的时间。停止/启动停止/启动一个定时任务，该功能仅定时任务可用。

云容器引擎 CCE 工作负载

云容器引擎 CCE-CustomedHPA策略:约束与限制

约束与限制 CustomedHPA策略仅支持1.15及以上版本的集群。 1.19.10以下版本的集群中，如果使用HPA策略对挂载了EVS卷的负载进行扩容，当新Pod被调度到另一个节点时，会导致之前Pod不能正常读写。 1.19.10及以上版本集群中，如果使用HPA策略对挂载了EVS卷的负载进行扩容，新Pod会因为无法挂载云硬盘导致无法成功启动。 CCE容器弹性引擎插件的资源使用量主要受集群中总容器数量和伸缩策略数量影响，通常场景下建议每5000容器配置CPU 500m, 内存1000Mi资源，每1000伸缩策略CPU 100m，内存500Mi。若cce-hpa-controller插件版本低于1.2.11，不支持使用云原生监控插件插件提供Metrics API来实现工作负载弹性伸缩。创建CustomedHPA策略后，不支持将已关联的工作负载修改为其他工作负载。

云容器引擎 CCE 工作负载弹性伸缩

云容器引擎 CCE-CustomedHPA策略:前提条件

前提条件使用CustomedHPA策略必须安装CCE容器弹性引擎，若该插件版本低于1.2.11，则必须安装prometheus插件；若版本大于或等于1.2.11，则需要安装能够提供Metrics API的插件，您可根据集群版本和实际需求选择其中之一： Kubernetes Metrics Server：提供基础资源使用指标，例如容器CPU和内存使用率。所有集群版本均可安装。云原生监控插件：该插件支持v1.17及以后的集群版本。根据基础资源指标进行弹性伸缩：需将Prometheus注册为Metrics API的服务，详见通过Metrics API提供资源指标。根据自定义指标进行弹性伸缩：需要将自定义指标聚合到Kubernetes API Server，详情请参见使用自定义指标创建HPA策略。 Prometheus（停止维护）：需将Prometheus注册为Metrics API的服务，详见通过Metrics API提供资源指标。该插件仅支持v1.21及之前的集群版本。

云容器引擎 CCE 工作负载弹性伸缩

云容器引擎 CCE-HPA策略:前提条件

前提条件使用HPA需要安装能够提供Metrics API的插件，您可根据集群版本和实际需求选择其中之一： Kubernetes Metrics Server：提供基础资源使用指标，例如容器CPU和内存使用率。所有集群版本均可安装。云原生监控插件：该插件支持v1.17及以后的集群版本。根据基础资源指标进行弹性伸缩：需将Prometheus注册为Metrics API的服务，详见通过Metrics API提供资源指标。根据自定义指标进行弹性伸缩：需要将自定义指标聚合到Kubernetes API Server，详情请参见使用自定义指标创建HPA策略。 Prometheus（停止维护）：需将Prometheus注册为Metrics API的服务，详见通过Metrics API提供资源指标。该插件仅支持v1.21及之前的集群版本。

云容器引擎 CCE 工作负载弹性伸缩

云容器引擎 CCE-登录容器:使用kubectl命令登录容器

使用kubectl命令登录容器使用kubectl连接集群，详情请参见通过kubectl连接集群。执行以下命令，查看已创建的Pod。 kubectl get pod 示例输出如下： NAME READY STATUS RESTARTS AGE nginx-59d89cb66f-mhljr 1/1 Running 0 11m 查询该Pod中的容器名称。 kubectl get po nginx-59d89cb66f-mhljr -o jsonpath='{range .spec.containers[*]}{.name}{end}{"\n"}' 示例输出如下： container-1 执行以下命令，登录到nginx-59d89cb66f-mhljr这个Pod中名为container-1的容器。 kubectl exec -it nginx-59d89cb66f-mhljr -c container-1 -- /bin/sh 如需退出容器，可执行exit命令。

云容器引擎 CCE 工作负载

云容器引擎 CCE-工作负载异常：实例调度失败:排查项二：节点资源（CPU、内存等）是否充足

排查项二：节点资源（CPU、内存等）是否充足 0/2 nodes are available: 2 Insufficient cpu. CPU不足。 0/2 nodes are available: 2 Insufficient memory. 内存不足。当“实例资源的申请量”超过了“实例所在节点的可分配资源总量”时，节点无法满足实例所需资源要求导致调度失败。如果节点可分配资源小于Pod的申请量，则节点无法满足实例所需资源要求导致调度失败。解决方案：资源不足的情况主要解决办法是扩容，建议在集群中增加节点数量。

云容器引擎 CCE 工作负载异常

云容器引擎 CCE-工作负载异常：实例调度失败:排查项六：检查临时卷使用量

排查项六：检查临时卷使用量 0/7 nodes are available: 7 Insufficient ephemeral-storage. 节点临时存储不足。检查Pod是否限制了临时卷的大小，如下所示，当应用程序需要使用的量超过节点已有容量时会导致无法调度，修改临时卷限制或扩容节点磁盘可解决此问题。 apiVersion: v1 kind: Pod metadata: name: frontend spec: containers: - name: app image: images.my-company.example/app:v4 resources: requests: ephemeral-storage: "2Gi" limits: ephemeral-storage: "4Gi" volumeMounts: - name: ephemeral mountPath: "/tmp" volumes: - name: ephemeral emptyDir: {}

云容器引擎 CCE 工作负载异常

云容器引擎 CCE-工作负载异常：实例调度失败:检查项九：检查节点上调度的Pod是否过多

检查项九：检查节点上调度的Pod是否过多 0/1 nodes are available: 1 Too many pods.表示节点上调度的Pod过多，超出可调度的最大实例数。创建节点时，在“高级配置”中可选择设置“最大实例数”参数，设置节点上可以正常运行的容器 Pod 的数目上限。该数值的默认值随节点规格浮动，您也可以手动设置。图1 最大实例数您可以在“节点管理”页面，查看节点的“容器组(已分配/总额度)”参数列，检查节点已调度的容器是否达到上限。若已达到上限，可通过添加节点或修改最大实例数的方式解决。您可通过以下方式修改“最大实例数”参数：默认节点池中的节点：通过重置节点时修改“最大实例数”。自定义节点池中的节点：可修改节点池配置参数中的max-pods参数。详情请参见节点池配置管理。图2 查看容器数

云容器引擎 CCE 工作负载异常

云容器引擎 CCE-工作负载异常：实例调度失败:排查项三：检查工作负载的亲和性配置

排查项三：检查工作负载的亲和性配置当亲和性配置出现如下互斥情况时，也会导致实例调度失败：例如： workload1、workload2设置了工作负载间的反亲和，如workload1部署在Node1，workload2部署在Node2。 workload3部署上线时，既希望与workload2亲和，又希望可以部署在不同节点如Node1上，这就造成了工作负载亲和与节点亲和间的互斥，导致最终工作负载部署失败。 0/2 nodes are available: 1 node(s) didn't match node selector, 1 node(s) didn't match pod affinity rules, 1 node(s) didn't match pod affinity/anti-affinity. node selector 表示节点亲和不满足。 pod affinity rules 表示Pod亲和不满足。 pod affinity/anti-affinity 表示Pod亲和/反亲和不满足。解决方案：在设置“工作负载间的亲和性”和“工作负载和节点的亲和性”时，需确保不要出现互斥情况，否则工作负载会部署失败。若工作负载配置了节点亲和性，需确保亲和的节点标签中supportContainer设置为true，否则会导致pod无法调动到节点上，查看事件提示如下错误信息： No nodes are available that match all of the following predicates: MatchNode Selector, NodeNotSupportsContainer 节点标签为false时将会调度失败。

云容器引擎 CCE 工作负载异常

云服务器内容精选

工作负载

7*24

备案

专业服务

退订

建议反馈

售前咨询热线