本地集群-华为云

华为云UCS-基础软件规划:HCE OS 2.0介绍

HCE OS 2.0介绍华为云操作系统（Huawei Cloud EulerOS，简称HCE OS）是基于华为开源社区openEuler构建的linux操作系统，提供云原生、高性能、安全稳定的执行环境来开发和运行应用程序，支持X86、ARM64等硬件架构。 HCE OS 2.0的优势：在云原生混合部署场景下，HCE OS 2.0能为U CS 提供大数据AI自动驾驶等GPU密集型在线业务与数据分析型离线业务的混合部署，提升集群整体资源利用率。 HCE OS 2.0可以为UCS提供GPU虚拟化能力，对GPU设备显存与算力进行动态划分，单个GPU卡最多虚拟化成20个GPU虚拟设备，提高GPU利用率。在安全上，HCE OS社区为国内最活跃的linux开源社区，100%替代CentOS，自主可控；SM2等多种国密算法支持；等保2.0/CC EAL4+安全认证能力。并默认启用和实施了selinux。

华为云UCS 安装本地集群的业务规划

华为云UCS-注册本地集群:注册集群

注册集群登录UCS控制台，在左侧导航栏中选择“容器舰队”。单击本地集群选项卡中的“注册集群”按钮。参考表1填写待添加集群的基础信息，其中带“*”的参数为必填参数。表1 注册集群基础信息配置参数参数说明集群名称* 输入集群的自定义名称，需以小写字母开头，由小写字母、数字、中划线（-）组成，且不能以中划线（-）结尾。所属区域* 选择集群所在的区域。集群标签非必填项，以键值对的形式为集群添加标签，可以通过标签实现集群的分类。键值对可自定义，以字母或者数字开头和结尾，由字母、数字、连接符（-）、下划线（_）、点号（.）组成，且63个字符之内。容器舰队选择集群所属的舰队。舰队用于权限精细化管理，一个集群只能加入一个舰队。若不选择舰队，集群注册成功后将显示在“未加入舰队的集群”页签下，后续还可以再添加至舰队中。不支持在注册集群阶段选择已开通集群联邦能力的舰队，如果一定要加入这个舰队，请在集群注册成功后，再添加到该舰队中。关于集群联邦的介绍，请参见开通集群联邦章节。如需新建舰队，请参见管理容器舰队。单击“确定”，集群注册成功后如图1所示，请在24小时内接入网络。您可选择集群的接入方式或单击右上角按钮查看详细的网络接入流程。如您未在24小时内接入网络，将会导致集群注册失败，可单击右上角按钮重新注册集群。如果已经接入但数据未采集上来，请等待2分钟后刷新集群。图1 集群等待接入状态

华为云UCS 本地集群

华为云UCS-安装前准备（私网接入）:部署网络环境

部署网络环境在UCS提供服务的区域中创建一个VPC，该VPC将用于后续安装终端节点，需保证该VPC与用户自有IDC网络环境打通。 VPC创建操作请参见创建虚拟私有云和子网，当前仅支持“华北-北京四”区域。该VPC子网网段不能与IDC中已使用的网络网段重叠，否则将无法接入集群。例如，IDC中已使用的VPC子网为192.168.1.0/24，那么华为云VPC中不能使用192.168.1.0/24这个子网。

华为云UCS 安装本地集群

华为云UCS-安装前准备（私网接入）:配置DNS服务器

配置DNS服务器配置DNS转发：在DNS服务器配置相应的DNS转发规则，将解析华为云内网域名的请求转发到DNS终端节点。以常见的DNS软件Bind为例：例如/etc/named.conf内，增加DNS转发器的配置，forwarders为DNS终端节点IP地址。下示代码中xx.xx.xx.xx是DNS的终端节点IP。 options { forward only； forwarders{ xx.xx.xx.xx;}; }; 增加静态DNS配置解析：增加DNS静态配置，SWR与CIE实例地址。如使用dnsmasq为例，在/etc/dnsmasq.conf中添加以下两个静态解析：第一个静态解析如下，下示代码中xx.xx.xx.xx是SWR的终端节点IP。 address=/swr.cn-north-4.myhuaweicloud.com/xx.xx.xx.xx 第二个静态解析如下，下示代码中xx.xx.xx.xx是域名对应的IP地址，在开启集群监控后生成。 address=/cia-{当前选择接入的VPCID前八位}{当前选择接入的VPC子网ID前八位}.cn-north-4.myhuaweicloud.com/xx.xx.xx.xx 示例：address=/cia-9992be3cf3eace24.cn-north-4.myhuaweicloud.com/ 172.16.0.81 生成域名。 SWR：address=/swr.cn-north-4.myhuaweicloud.com/{SWR VPC-EP} CIA：域名的获取：如当前选择接入的VPC和子网如下（如下截图vpc-cie仅是示例，实际VPC以UCS服务所在的VPC为准）图1 VPC的ID前8位图2 子网的ID前8位最终域名拼接后是：cia-388c6b41a55f85b1.cn-north-4.myhuaweicloud.com

华为云UCS 安装本地集群

华为云UCS-安装前准备（私网接入）:购买终端节点（VPCEP）

购买终端节点（VPCEP）登录UCS控制台，单击待接入集群栏的“单击接入”进入集群接入界面，单击“私网接入”。查看“创建终端节点”中的服务名称，单击，记录服务名称。登录 VPC终端节点控制台，单击“购买终端节点”，创建连接不同服务的终端节点。选择终端节点的区域，单击“按名称查找服务”，输入2中所记录的服务名称，并单击“验证”，创建UCS的终端节点。创建DNS、SWR、OBS的终端节点。选择部署网络环境中创建的虚拟私有云以及对应的子网。 “节点IP”选择“自动分配”或“手动分配”均可。单击“立即购买”，规格确认无误后，单击“提交”。将创建的终端节点配置到所使用的DNS服务器中。单击创建出的VPCEP节点名称，记录节点IP，以便在IDC的DNS Server中增加华为云的DNS转发器。

华为云UCS 安装本地集群

华为云UCS-升级本地集群:master节点与组件升级命令说明

master节点与组件升级命令说明本地集群用户可以通过最新版本的本地集群命令行工具ucs-ctl来进行集群升级，对于管理组件和管理节点的升级，命令如下： ./ucs-ctl upgrade cluster [cluster_name] [flags] 可以配置的flag如下： -a：节点的全量升级，默认情况下upgrade cluster只会升级管理面节点和服务组件，加上-a后则表示全量升级，包括升级所有的业务节点。 -y：默认同意所有请求。 -patch：升级补丁包。 -R：回滚选项。

华为云UCS 管理本地集群

华为云UCS-升级本地集群:升级操作

升级操作登录UCS控制台，选择“容器舰队”或“未加入舰队的集群”内一个正在运行的低版本集群，单击右下方“升级集群”。下载更新工具，请使用一台能连接集群的节点作为执行机，先使用如下命令下载新版本的集群管理工具： curl https://ucs-onprem.obs.XXXX.huawei.com/toolkits/ucs-ctl/ucs-ctl -o ucs-ctl && chmod +x ucs-ctl 升级master节点，这里可以使用-y命令来跳过所有选择项，其他可配置的flag请参照master节点与组件升级命令说明： ./ucs-ctl upgrade cluster [cluster name] 集群名称需要和创建本地集群时指定的名称一致，如果不确定名称可进集群内，使用命令查看： ./ucs-ctl get cluster node节点升级，node节点升级可以选择两种升级方式：全量升级，全量升级指的是将集群内剩余节点全部升级，命令如下： ./ucs-ctl upgrade node -a -c [cluster name] 分批次部分升级，为了防止升级过程出现业务中断的情况，用户也可以选择分批次部分升级节点，此时需要手动选择节点。 ./ucs-ctl upgrade node -n [node ip] -c [cluster name] 特殊情况：若本地集群目前只有master节点，无node节点，此时仅提供master节点的升级命令。其他可配置的flag请参照node节点升级命令说明。

华为云UCS 管理本地集群

华为云UCS-升级本地集群:node节点升级命令说明

node节点升级命令说明对于常规业务节点的升级，命令如下: ./ucs-ctl upgrade node [flags] -c [cluster_name] 其中必须指定集群名称，即加上`-c [cluster_name]`这个flag。可以配置的flag如下： -a：节点的全量升级。 -y：默认同意所有请求。 -c：指定集群名称。 -r：回滚选项。 -n：指定节点IP。 -f：指定节点配置文件。

华为云UCS 管理本地集群

华为云UCS-数据规划:外部依赖

外部依赖依赖项功能解释 DNS服务器 DNS服务器需要能够解析OBS、SWR、 IAM 、DNS以及CIA服务的域名，这些服务的域名请参见地区及终端节点。公网接入情况下，节点可自动识别默认DNS配置，需提前将DNS服务器上游设置为公网DNS，接下来无需再手动进行DNS服务器配置。私网接入情况下，节点无法识别默认DNS配置，因此需提前配置好VPCEP解析能力，详情请参考安装前准备。若没有DNS服务器，可参考DNS进行搭建。 apt源确保有可用的apt源，因为在本地集群执行纳管节点时（纳管节点是指待添加到本地集群管理的服务器），部分安装组件如ntp等，需要从apt源中获取依赖包。 NTP服务器可选，用于保证集群各节点时间同步，如果使用，推荐用户提供外置NTP服务器。

华为云UCS 安装本地集群的业务规划

华为云UCS-数据规划:磁盘挂卷建议

磁盘挂卷建议节点类型磁盘挂载点可用大小（GB）用途集群管理节点 /var/lib/containerd 50 存放containerd镜像目录 /run/containerd 30 containerd运行时目录 /var/paas/run 50 etcd数据目录（推荐使用ssd盘） /var/paas/sys/log 20 存放日志目录 /mnt/paas 40 容器运行挂载目录 /tmp 20 临时文件目录集群计算节点 /var/lib/containerd 100 存放containerd镜像目录 /run/containerd 50 containerd运行时目录 /mnt/paas 50 容器运行挂载目录

华为云UCS 安装本地集群的业务规划

华为云UCS-数据规划:资源规格

资源规格 UCS所安装的本地集群为HA版，适用于商用场景，以满足容灾高可用需求。商用版资源规格如下所述：表2 容器平台基础能力资源规格节点类型数量 CPU (Cores) Mem (GiB) Disk (G)-系统盘 Disk (G)-高性能盘 Disk (G)-数据盘备注集群管理节点 3 8 16 100 50 300 需要提供一个VIP用于高可用。集群计算节点按需 2 4 40 - 100 数量按需可扩展。表3 容器智能分析节点资源规格节点类型 CPU (Cores) Mem (GiB) 监控prometheus Requests：1 Limits：4 Requests：2 Limits：12 事件log-agent Requests：0.5 Limits：3 Requests：1.5 Limits：2.5 表4 云原生服务中心计算节点资源规格类型数量 CPU (Cores) Mem (GiB) Disk (G)-系统盘 Disk (G)-高性能盘 Disk (G)-数据盘 operator-chef 1 Requests：0.5 Limits：2 Requests：0.5 Limits：2 不涉及不涉及 10（日志） helm-operator 1 Requests：0.3 Limits：1.5 Requests：0.3 Limits：1.5 不涉及不涉及 10（日志） ops-operator 1 Requests：0.3 Limits：1.5 Requests：0.3 Limits：1.5 不涉及不涉及 10（日志）

华为云UCS 安装本地集群的业务规划

华为云UCS-数据规划:用户规划

用户规划本地集群用户规划如所示：表6 用户规划用户用户组用户ID 用户组ID 密码用途 root root 0 0 - UCS本地集群安装时使用的默认用户，也可以指定其他用户来安装本地集群。安装用户要求满足如下条件：规划的所有集群管理节点密码一致。用户具有完全的root用户权限。说明：安装完成后用户可以自行修改该用户密码或限制该用户root权限。 paas paas 10000 10000 - UCS本地集群服务进程的运行用户、用户组，在安装过程中创建。该用户和用户组对应名称为paas:paas，用户ID和用户组ID对应为10000:10000，因此安装前需要保证用户名、用户组名、用户ID和用户组ID不被占用。若发生冲突，需提前删除对应的用户或者用户组。

华为云UCS 安装本地集群的业务规划

华为云UCS-数据规划:防火墙规划

防火墙规划防火墙的规划需符合表1中要求。表1 防火墙规划源设备源IP 源端口目的设备目的IP 目的端口（侦听）协议端口说明侦听端口是否可更改认证方式加密方式 ucsctl执行机源设备所在节点IP ALL 所有节点目的设备所在节点IP 22 TCP SSH 否证书/用户名密码 TLS v1.2 所有节点源设备所在节点IP ALL NTP server 目的设备所在节点IP 123 UDP ntp 否无无所有节点源设备所在节点IP ALL DNS server 目的设备所在节点IP 53 UDP dns 否无无所有节点源设备所在节点IP ALL 自建APT源目的设备所在节点IP 80/443 TCP http 否无无所有节点源设备所在节点IP ALL 集群负载均衡/VIP 目的设备所在节点IP 5443 TCP kube-apiserver 否 https+证书 TLS v1.2 所有节点源设备所在节点IP 1024-65535 所有节点目的设备所在节点IP 1024-65535 ALL 无否无无所有节点源设备所在节点IP ALL 所有节点目的设备所在节点IP 8472 UDP vxlan端口否无无需要访问ingress的节点源设备所在节点IP ALL 网络节点目的设备所在节点IP 80/443/按需指定端口 TCP http 否 https+证书 TLS v1.2 所有节点源设备所在节点IP ALL 3台master节点目的设备所在节点IP 5444 TCP kube-apiserver 否 https+证书 TLS v1.2 ucsctl执行机源设备所在节点IP ALL 华为云OBS服务 obs.cn-north-4.myhuaweicloud.com 443 TCP http 否 https+证书 TLS v1.2 3台master节点源设备所在节点IP ALL 华为云UCS服务 124.70.21.61 proxyurl.ucs.myhuaweicloud.com 30123 TCP grpc 否 https+证书 TLS v1.2 3台master节点源设备所在节点IP ALL 华为云IAM服务 iam.cn-north-4.myhuaweicloud.com 443 TCP http 否 https+证书 TLS v1.2 所有节点源设备所在节点IP All 华为云SWR服务 swr.cn-north-4.myhuaweicloud.com 443 TCP http 否 https+证书 TLS v1.2 所有节点源设备所在节点IP ALL Ubuntu官方源/国内代理源按需配置 80/443 TCP http 否无无监控节点源设备所在节点IP ALL 华为云 AOM 域名对应IP地址 443 TCP http 否 https+证书 TLS v1.2 监控节点源设备所在节点IP ALL 华为云LTS 域名对应IP地址 443 TCP http 否 https+证书 TLS v1.2

华为云UCS 安装本地集群的业务规划

华为云UCS-使用L7负载均衡Ingress-nginx:功能验证

功能验证登录UCS控制台。如果是未加入舰队集群，直接单击集群名即可进入集群控制台。如果是已加入容器舰队的集群，先进入对应容器舰队控制台，选择左侧 “集群管理”内的“容器集群”，再进入对应集群控制台。左侧导航栏内选择“工作负载”，单击镜像创建。选择可用镜像创建负载，并在“服务配置”中单击，添加一个ClusterIP类型的Service。图3 创建工作负载左侧导航栏内选择“服务与路由”，单击“路由”，单击“创建路由”，选择刚刚所创建的ClusterIP类型的Service。路由配置相关操作请参见路由。访问ingress服务，确认转发规则配置成功。如果是使用LoadBalancer暴露的ingress服务，选择LoadBalancer的ingress服务进行集群外访问：如果是使用NodePort暴露的ingress服务，选择任意节点+ingress svc端口进行集群外访问：

华为云UCS 管理本地集群网络

华为云UCS-使用L7负载均衡Ingress-nginx:安装Ingress-nginx

安装Ingress-nginx 登录UCS控制台。左侧导航栏内选择“云原生服务中心”，在“服务目录中”中搜索Ingress-nginx开源插件，单击进入插件详情。图1 搜索Ingress-nginx 订阅Ingress-nginx后，单击“创建实例”，选择需要使用Ingress-nginx的集群。如果是集群已安装Metallb，可以使用Metallb的负载均衡能力，将ingress-nginx服务暴露到集群外，直接根据页面引导进行安装。如果集群未规划安装Metallb，则只能通过NodePort形式暴露ingress-nginx能力。需要将.values.controller.service.type从LoadBalancer修改为NodePort后进行安装，如图2所示。图2 参数修改

华为云UCS 管理本地集群网络

云服务器内容精选

本地集群

7*24

备案

专业服务

退订

建议反馈

售前咨询热线