众所周知Kubernetres虽然很好但是安装部署很复杂, Rancher功能很强大,我们这里仅仅使用Rancher来搭建管理Kubernetes集群

Kubernetes官方文档:https://kubernetes.io/docs/reference
Kubernetes官方Git地址:https://github.com/kubernetes/kubernetes
Rancher官方地址: https://www.cnrancher.com/

PS:本系列中使用 KubernetesV1.8 RancherV1.6.14

1.安装Rancher

这里使用三台机器来搭建Kubernetes集群

K8S-M 172.168.0.128
K8S-S1 172.168.0.129
K8S-S2 172.168.0.130

Rancher Server当前版本中有2个不同的标签。对于每一个主要的release标签，我们都会提供对应版本的文档。

rancher/server:latest 此标签是最新一次开发的构建版本。这些构建已经被CI框架自动验证测试。但这些release并不代表可以在生产环境部署。
rancher/server:stable 此标签最新一个稳定的release构建。这个标签代表推荐在生产环境中使用的版本。

PS:请不要使用任何带有 rc{n} 前缀的release。这些构建都是Rancher团队的测试构建。

这里使用Cenos7.4,并且安装好Docker-17.03.2-ce版本,在拉取稳定的Rancher-v1.6.14版本

PS:Kubernets支持的Docker版本 1.11.2 to 1.13.1 and 17.03.2

docker pull rancher/server:v1.6.14

使用一个简单的命令就可以启动一个单实例的Rancher。

docker run -d --restart=unless-stopped -p 8080:8080 rancher/server:v1.6.14

关闭防火墙(后续增加节点需要和主节点端口通讯需要关闭防火墙)

systemctl stop firewalld.service    # 关闭firewall
systemctl disable firewalld.service # 禁止firewall开机启动

等待容器启动访问对应IP的8080端口的地址可以看到如下界面

通过右下角可以编辑语言切换成简体中文


2.外挂数据库目录(按需)

在Rancher Server容器中，如果你想使用一个主机上的卷来持久化数据库，如下命令可以在启动Rancher时挂载MySQL的数据卷。

docker run -d -v /usr/local/rancher_mysql:/var/lib/mysql --restart=unless-stopped -p 8080:8080 rancher/server:stable

使用这条命令，数据库就会持久化在主机上。如果你有一个现有的Rancher Server容器并且想挂在MySQL的数据卷，可以参考官方的Rancher升级介绍。

Rancher使用外部数据库

除了使用内部的数据库，你可以启动一个Rancher Server并使用一个外部的数据库。启动命令与之前一样，但添加了一些额外的参数去说明如何连接你的外部数据库。

注意：在你的外部数据库中，只需要提前创建数据库名和数据库用户。Rancher会自动创建Rancher所需要的数据库表。

以下是创建数据库和数据库用户的SQL命令例子

CREATE DATABASE IF NOT EXISTS cattle COLLATE = 'utf8_general_ci' CHARACTER SET = 'utf8';
GRANT ALL ON cattle.* TO 'cattle'@'%' IDENTIFIED BY 'cattle';
GRANT ALL ON cattle.* TO 'cattle'@'localhost' IDENTIFIED BY 'cattle';

启动一个Rancher连接一个外部数据库，你需要在启动容器的命令中添加额外参数。

docker run -d --restart=unless-stopped -p 8080:8080 rancher/server --db-host myhost.example.com --db-port 3306 --db-user username --db-pass password --db-name cattle

3.权限管理

机制的小伙伴都注意到了现在登录到Rancher不需要任何用户名密码,Rancher的用户体系需要自己开启

可以选择很多汇总认证的方式

最方便的方式就是开启本地账号认证

填写好相关用户名密码之后开启本地验证下次登录就需要验证用户了,并且在后续的管理中也能进行权限控制


4.Rancher多节点HA部署

在高可用(HA)的模式下运行Rancher Server与使用外部数据库运行Rancher Server一样简单，需要暴露一个额外的端口，添加额外的参数到启动命令中，并且运行一个外部的负载均衡就可以了。

HA部署需求

HA 节点:
所有安装有支持的Docker版本的现代Linux发行版 RancherOS, Ubuntu, RHEL/CentOS 7 都是经过严格的测试。
对于 RHEL/CentOS, 默认的 storage driver, 例如 devicemapper using loopback, 并不被Docker推荐。 请参考Docker的文档去修改使用其他的storage driver。
对于 RHEL/CentOS, 如果你想使用 SELinux, 你需要 安装额外的 SELinux 组件.
9345, 8080 端口需要在各个节点之间能够互相访问
1GB内存

MySQL数据库
至少 1 GB内存
每个Rancher Server节点需要50个连接 (例如：3个节点的Rancher则需要至少150个连接)
MYSQL配置要求
选项1: 用默认COMPACT选项运行Antelope
选项2: 运行MySQL 5.7，使用Barracuda。默认选项ROW_FORMAT需设置成Dynamic

外部负载均衡服务器
负载均衡服务器需要能访问Rancher Server节点的 8080 端口

注意：目前Rancher中并不支持Docker for Mac

5.大规模部署建议

每一个Rancher Server节点需要有4 GB 或者8 GB的堆空间，意味着需要8 GB或者16 GB内存
MySQL数据库需要有高性能磁盘
对于一个完整的HA，建议使用一个有副本的Mysql数据库。另一种选择则是使用Galera集群并强制写入一个MySQL节点。

在每个需要加入Rancher Server HA集群的节点上，运行以下命令：

# Launch on each node in your HA cluster
> docker run -d --restart=unless-stopped -p 8080:8080 -p 9345:9345 rancher/server \
     --db-host myhost.example.com --db-port 3306 --db-user username --db-pass password --db-name cattle \
     --advertise-address <IP_of_the_Node>

在每个节点上， 需要在每个节点上唯一，因为这个IP会被添加到HA的设置中。 如果你修改了 -p 8080:8080 并在host上暴露了一个不一样的端口，你需要添加 --advertise-http-port 参数到命令中。

注意：你可以使用 docker run rancher/server --help 获得命令的帮助信息

HA模式下的RANCHER SERVER节点

如果你的Rancher Server节点上的IP修改了，你的节点将不再存在于Rancher HA集群中。你必须停止在--advertise-address配置了不正确IP的Rancher Server容器并启动一个使用正确IP地址的Rancher Server的容器。

6.配置K8S环境模板

如果大家直接创建一个K8S的环境会发现根本无法初始化,主要原因是K8S相关的Docker包是存放到gcr.io下面,https://cloud.google.com/container-registry , 在国内访问google是一件很痛苦的事情所以第一件事情就要解决墙带来的痛苦,所以我们需要使用国内的K8S源
先进入到环境管理:

添加一个新的环境模板

选择K8S,然后点击编辑环境

修改以下可配置项,更换K8S源
私有仓库地址：registry.cn-shenzhen.aliyuncs.com

rancher_cn/pause-amd64:3.0

AAONS组件命名空间：rancher_cn

kubernetes-helm命名空间：rancher_cn

点击设置

配置名称为K8S-CN

在页面最下面点击创建后就能看到有这样一个模板了


6.创建一个K8S集群

这里统一使用的都是Centos7.4系统,Docker-17.03.02-ce版本

同样在环境配置中选择添加环境

填写好名称K8S-DEMO选择我们之前创建好的国内K8S模板

创建好之后在左上角选择我们创建的环境


可以看到初始化进度,等待添加主机


选择技术架构->主机


添加主机


设置主机连接到Rancher的地址(在内网情况下使用内网IP)


复制部署脚本(也可以直接接入云厂商服务)


PS:第四步<主机同时也是运行rancher/server容器的主机时，则必须设置此IP。> 我们在配置master是在rancher上配置的所以设置好主机的IP,推荐node节点也配置上对应的IP

在服务器上运行脚本增加主机

我们可以看到主机已经是活跃状态了,并且K8S相关组件都已经配置启动起来了

我们在接着加两台node节点

现在就有三台正常的主机了,通过上面菜单的KUBERNETES中的仪表盘可以进入到kubernetes-dashboard

7.尝试使用K8S



选择cli可以使用在线ssh工具操作kubectl

在K8S中运行一个nginx容器

> kubectl run kube-nginx --image=nginx:latest --port=80 --image-pull-policy=IfNotPresent

查看创建的pods查看容器对应的IP

> kubectl get pods -o wide
NAME                          READY     STATUS    RESTARTS   AGE       IP             NODE
kube-nginx-56495867b4-gvfrs   1/1       Running   0          58s       10.42.194.56   k8s-2

通过K8S分配的内部IP,就可以在web-shell中访问对应的nginx

> curl 10.42.194.56
<!DOCTYPE html>
<html>
<head>
<title>Welcome to nginx!</title>

如果不需要了可以使用以下命令进行删除

> kubectl delete deployment kube-nginx
deployment "kube-nginx" deleted
> kubectl get pods -o wide
No resources found.