高可用集群说明
部署高可用集群关键在于规划,例如:整个集群规划使用多少台服务器,每台服务器的角色是什么,服务器资源、磁盘如何规划等。
部署架构
如图所示:采用了最少的节点数量(3节点)保证高可用,K8s 采用多 Master + 多 ETCD 集群保障高可用,Rainbond 采用外部负载均衡 + 多网关节点 + MySQL高可用集群保障高可用。
高可用 Kubernetes 集群
Kubernetes 集群至少需要部署 3 个节点的集群,3 个节点的属性都可进行复用,例如:3 管理节点、3 计算节点、3 ETCD 节点。
可自行安装 Kubernets 集群,也可通过 Rainbond 安装 Kubernetes 集群。
高可用 Rainbond 集群
部署高可用 Rainbond 集群关键在于:
- 高可用 Kubernetes 集群;
- Rainbond 集群的高级配置使用外置的高可用服务。
下述将对 Rainbond 所需要的外部服务分别 进行说明,包括这些服务的高可用部署。
负载均衡
Rainbond 集群网关需要部署在高可用的负载均衡器上,保障集群网关的高可用性。
使用已有的负载均衡器
若已有高可用的负载均衡器,可直接使用,需满足以下条件:
- 代理到 Rainbond 所有网关节点
- 开放 80,443,6060,7070,8443 端口
部署 Keepalived
若还没有负载均衡服务则可通过在网关节点上 部署 Keepalived 服务来确保网关的高可用性,通过该种方式网关节点为主备关系。
网关节点
指定 Rainbond 网关服务部署并运行在哪个节点上,每个节点上的网关服务都可独立进行工作,即使某一个网关节点挂掉,其他网关节点依旧能正常工作。
构建节点
指 定 Rainbond 构建服务部署并运行在哪个节点上,构建节点的数量越多代表能同时并行构建的任务也就越多。
构建比较消耗磁盘,建议将构建服务运行在有 SSD 磁盘的节点上。
镜像仓库
指定 Rainbond 底层镜像仓库,平台上的所有组件镜像都会从这个仓库拉取、推送。默认提供内置镜像仓库,以 Pod 方式运行在rbd-system
命名空间下,默认元数据通过 rbd-hub
pvc 进行存储。
如已有镜像仓库可直接使用,需满足以下条件:
- 建议使用 https 协议以及可信任证书,如使用 http 则需要修改 Docker、Containerd 相关的配置。
MySQL
Rainbond 需要使用 MySQL 存储控制台及集群端数据。默认提供内置的 MySQL 数据库,以 Pod 方式运行在rbd-system
命名空间下,会随机绑定一个节点并将元数据存储该节点的/opt/rainbond/data/dbxxx
目录下。
若已有高可用数据库则可直接使用,需满足以下条件:
- 数据库版本为MySQL 5.7,8.0;
- 提前创建 console region 库;
- 数据库字符编码为 utf8mb4;
- 推荐数据库与 Rainbond 集群网络在同一内网范围内。
如还未安装数据库,请参阅文档安装 在 Docker 中部署 MySQL 主从集群、在 Centos 7 中部署 MySQL 主从集群