实战-kubeadm方式搭建k8s集群-v1-20-0-20210605-测试成功-mk

实战：kubeadm方式搭建k8s集群(k8s-v1.20.0,docker-20.10.7-ce)-2021.6.5(部署成功-mk)

目录

[TOC]

前言

本人博客宗旨：

1.本人提供的实战文档过程超详细，拿着我的博客，每个人最终都可以成功测试出实验现象，完全避免网上的一些埋着很多坑的博客(特别浪费时间，个人深有感触)；

2.自己博客主张以实战为主，但同时会辅助一些理论知识，理论部分请主要查看基础知识章节；

3.博客力求排版美观、组织语言简明扼要；

4.提供实验涉及软件、源码；

5.实验过程如有遇到任何问题或者文章中有任何不足之处，欢迎留言或随时联系鄙人，微信：x2675263825，QQ：2675263825，在it学习的道路上，让我们一起共同成长!

鸣谢

这里，非常感谢IT学神MK老师分享的优良且细致的公开课，及阿良老师的优质课程。本篇文章是从老师公开课及文档整理而来的，欢迎小伙伴查阅。

一.基础知识

本片文章主要介绍了kubeadm部署k8s(离线软件源)的实验过程，大家可以get到一个如何制作离线安装包的方式。具体详细关于kubeadm部署k8s文章，可参考我的另一篇博客:[避坑实战-快速部署一个kubernetes集群(超详细-已成功测试)-20210605](https:

二.实验过程

实验环境

1、硬件环境

3台虚机 2c2g,20g。(nat模式，可访问外网)

角色	主机名	ip
master节点	k8s-master	172.29.9.31
node节点	k8s-node1	172.29.9.32
node节点	k8s-node2	172.29.9.33

2、软件环境

软件	版本
操作系统	centos7.7_x64 1908 mini(一定要是这个系统才行)
docker	20.10.7
kubernetes	v1.20.0

• 注意：

  本次是采用kubeadm以离线安装包方式部署k8s,因此，操作系统版本一定要和我的保持一致，否则可能因一些软件包版本问题导致实验测试失败。

实验软件

链接：https:yum-config-manager--add-repohttp:yuminstall-ydocker-cedocker-ce-clicontainerd.io--downloadonly--downloaddir=k8s-dockercat>/etc/yum.repos.d/kubernetes.repo<<EOF[kubernetes]name=Kubernetesbaseurl=https:enabled=1gpgcheck=0repo_gpgcheck=0gpgkey=https:EOFyuminstall-ykubelet-1.20.0kubeadm-1.20.0kubectl-1.20.0--downloadonly--downloaddir=k8s-docker

2.但是，想要制作镜像离线包，就需要先以kubeadms部署一套k8s，然后再导出本地所有镜像。

具体如何搭建，请看我的博客文章避坑实战-快速部署一个kubernetes集群(超详细-已成功测试)-20210605。

具体如何导出所有本地镜像，请看我的博客文章实战-离线docker镜像包制作方法-20210605。

本次，我已经提前准备好了以上2个离线包，大家直接使用即可。

接下来，就开始使用kubeadm以离线安装包方式部署k8s了，基本步骤和我的上面提到的博客文档：避坑实战-快速部署一个kubernetes集群(超详细-已成功测试)-20210605。类似，大家可以参考。

0.集群环境配置(all节点均要配置)

(1)配置互信

说明：这边配置互信，是为了后续在从k8s-master节点往node节点传输文件时比较方便；

在k8s-master上生成ssh密钥对：

[root@k8s-master ~]#ssh-keygen #一路回车即可

把公钥文件赋值到自己及2个node节点：

[root@k8s-master ~]#ssh-copy-id 172.29.9.31[root@k8s-master ~]#ssh-copy-id 172.29.9.32[root@k8s-master ~]#ssh-copy-id 172.29.9.33

测试互信是否配置成功？-->经测试，互信配置成功！

(2)Linux基础环境配置

关闭且禁用如下服务：firewalld、NetworkManager、selinux

systemctlstopfirewalld&&systemctldisablefirewalldsystemctlstopNetworkManager&&systemctldisableNetworkManagersetenforce0sed-is/SELINUX=enforcing/SELINUX=disabled//etc/selinux/config

(3)关闭swap分区

说明：以下提供了2种关闭swap分区的方法，这里2条命令都刷一下！

swapoff-ased-ri's/.*swap.*/#&/'/etc/fstab

#说明kubelet，它是不支持你启动swap的，如果你不把它关掉，kubelet是起不来的；可能kublet考虑到用swap做数据交换的话，对性能影响比较大；swap必须关，否则kubelet起不来,k8s集群起不来；

(4)设置主机名

hostnamectl--staticset-hostnamek8s-masterbashhostnamectl--staticset-hostnamek8s-node1bashhostnamectl--staticset-hostnamek8s-node2bash

(5)所有节点添加hosts内容

cat>>/etc/hosts<<EOF172.29.9.31 k8s-master172.29.9.32 k8s-node1172.29.9.33 k8s-node2EOF

(6)将桥接的IPv4流量传递到iptables的链

cat>/etc/sysctl.d/k8s.conf<<EOFnet.bridge.bridge-nf-call-ip6tables =1net.bridge.bridge-nf-call-iptables =1EOFsysctl--system

说明：这个是一定要配置的；不配置的话，在安装过程中会有warning的；

(7)时间同步

yuminstallntpdate-yntpdatetime.windows.com

说明：

因为里面涉及到证书，而证书对时间是很敏感的，里面的校验都是需要用到时间的，因此这3台机器必须保持时间同步；

• 到此，集群初始化工作已经完成了，此时对3台机器做一个快照。

1.配置 kubeadm、docker-ce 的离线 yum 源(all节点都要配置)

(1)在master节点配置 kubeadm、docker-ce 的离线 yum 源

上传文件到mster节点的/root/目录下：

解压yum离线安装并配置repo文件：

注意：此时已经不需要本地yum源了，为了现象更直观，这里建议把原有yum仓库给屏蔽掉；

[root@k8s-master ~]#cd /etc/yum.repos.d/[root@k8s-master yum.repos.d]#lsbackup-2021-05-30CentOS-CR.repoCentOS-fasttrack.repoCentOS-Sources.repoCentOS-Base.repoCentOS-Debuginfo.repoCentOS-Media.repoCentOS-Vault.repo[root@k8s-master yum.repos.d]#mv *backup-2021-05-30/mv:cannotmove‘backup-2021-05-30’toasubdirectoryofitself,‘backup-2021-05-30/backup-2021-05-30’[root@k8s-master yum.repos.d]#lsbackup-2021-05-30[root@k8s-master yum.repos.d]#

再配置本次的离线Yum仓库：

tarxfk8s-docker.tar.gz-C/opt/tee/etc/yum.repos.d/k8s-docker.repo<<'EOF'[k8s-docker]name=k8s-dockerbaseurl=file:enabled=1gpgcheck=0EOF

(2)在node1节点配置 kubeadm、docker-ce 的离线 yum 源

[root@k8s-master ~]#scp /etc/yum.repos.d/k8s-docker.repo root@172.29.9.32:/etc/yum.repos.d/[root@k8s-master ~]#scp -r /opt/k8s-docker/ root@172.29.9.32:/opt/

(3)同理，在node2节点配置 kubeadm、docker-ce 的离线 yum 源

[root@k8s-master ~]#scp /etc/yum.repos.d/k8s-docker.repo root@172.29.9.33:/etc/yum.repos.d/[root@k8s-master ~]#scp -r /opt/k8s-docker/ root@172.29.9.33:/opt/

2.离线yum安装docker软件(all节点都要配置)

这里利用多窗口方式批量配置如下命令；

我们已经配置了 docker 本地源，这里直接安装 docker-ce 软件即可。

安装依赖包：

yuminstall-yyum-utilsdevice-mapper-persistent-datalvm2

安装docker：

yuminstall-ydocker-cedocker-ce-clicontainerd.iosystemctlstartdocker&&systemctlenabledockermkdir-p/etc/dockertee/etc/docker/daemon.json<<-'EOF'{"registry-mirrors":["https:}EOFsystemctldaemon-reloadsystemctlrestartdocker

docker安装后验证是否安装成功？

3.离线yum安装kubeadm/kuebctl/kubelet软件(all节点都要配置)

在 master 和 node 上安装 kubeadm 组件，用于后期安装 k8s 使用，现在还没有安装 k8s，注意

安装 kubelet 的软件包在我们离线 yum 源中已经包含，可以直接安装，如需安装其他版本 k8s 可以配

置在线源进行安装。

yuminstall-ykubelet-1.20.0kubeadm-1.20.0kubectl-1.20.0systemctlenablekubelet

4.导入下离线镜像(all节点都要配置)

上传镜像文件到master节点：

在master 上，离线导入 docker 镜像。3 台机器都导入一下，避免 node 节点找不到镜像。

[root@k8s-master ~]#docker load -i k8s-images-v1.20.0.tar.gz #我已经把所有 k8s 镜像，都导成一个包了。[root@k8s-master ~]#gzip -dc k8s-images-v1.20.0.tar.gz |sshroot@172.29.9.32'cat |docker load'[root@k8s-master ~]#gzip -dc k8s-images-v1.20.0.tar.gz |sshroot@172.29.9.33'cat |docker load'#注：gzip 参数： -c 将输出写到标准输出上，并保留原有文件。-d 将压缩文件解压。

导入完成后，本地查看镜像：

5.使用 kubeadm 初始化 k8s 集群(master节点)

在master节点执行如下命令：

kubeadminit\--apiserver-advertise-address=172.29.9.31\--image-repositoryregistry.aliyuncs.com/google_containers\--kubernetes-versionv1.20.0\--service-cidr=10.96.0.0/12\--pod-network-cidr=10.244.0.0/16\--ignore-preflight-errors=all#注：--image-repositoryregistry.aliyuncs.com/google_containers为保证拉取镜像不到国外站点拉取，手动指定仓库地址为registry.aliyuncs.com/google_containers。kubeadm默认从k8ss.grc.io拉取镜像。

安装完成：

节点注册命令我们保存下来稍后我们需要:

kubeadmjoin172.29.9.31:6443--tokenr7p5jz.b7qxahhbvy5o2kgk\--discovery-token-ca-cert-hashsha256:664cccf826d417c762fdc8503d9091af9a49236269c6d460843e73f39ec5d514

配置 kubectl 的配置文件，保存一个证书，这样 kubectl 命令可以使用这个证书对 k8s 集群进行管

理：

mkdir-p$HOME/.kubesudocp-i/etc/kubernetes/admin.conf$HOME/.kube/configsudochown$(id-u):$(id-g) $HOME/.kube/config

查看集群状态：

6.将Node节点加入到当前集群中(在node节点执行)

• 注意:如果当时忘记复制那个join命令了，该怎么办呢？

默认token有效期为24小时，当过期之后，该token就不可用了。这时就需要重新创建token，可以直接使用命令快捷生成：(注意：如果token还在有效期的话，那么就会打印出原来的token)

#在master节点上查看加入节点的命令：[root@k8s-master ~]#kubeadm token create --print-join-commandkubeadmjoin172.29.9.31:6443--tokenr7p5jz.b7qxahhbvy5o2kgk\--discovery-token-ca-cert-hashsha256:664cccf826d417c762fdc8503d9091af9a49236269c6d460843e73f39ec5d514[root@k8s-master ~]

• 开始join进群

#在2个node节点执行如下命令：kubeadmjoin172.29.9.31:6443--tokenr7p5jz.b7qxahhbvy5o2kgk\--discovery-token-ca-cert-hashsha256:664cccf826d417c762fdc8503d9091af9a49236269c6d460843e73f39ec5d514

• 执行过程截图如下

• 此时，再到master节点查看下集群状态，发现已经多出了2个node节点了。

7.安装 kubernetes 网络组件-Calico

上传 calico.yaml 到 linux 中，使用 yaml 文件安装 calico 网络插件 :

Calico是一个纯三层的数据中心网络方案，是目前Kubernetes主流的网络方案。(工作中：calico用的比较多)

• 下载YAML：

wgethttps:-rw-r--r--1rootroot185KJun206:23calico.yaml[root@k8s-master ~]#vim calico.yaml

• 修改完后文件后，部署：

[root@k8s-master ~]#kubectl apply -f calico.yaml

• 验证

我们可以用如下命令来看一下这4个pod是否准备就绪，等Calico Pod都Running，节点也会准备就绪：

[root@k8s-master ~]#kubectl get pods -n kube-system

8.实战-安装 kubernetes-dashboard-2.0

Dashboard是官方提供的一个UI，可用于基本管理K8s资源。

• 下载

wgethttps:#需要科学上网下载

• 这里使用我下载好的就行

课件中文件名是：kubernetes-dashboard.yaml

这里手动上传kubernetes-dashboard.yaml文件到系统上：

• 修改yaml文件

默认Dashboard只能集群内部访问，修改Service为NodePort类型，暴露到外部：

[root@k8s-master ~]#vim kubernetes-dashboard.yamlvirecommended.yaml...kind:ServiceapiVersion:v1metadata:labels:k8s-app:kubernetes-dashboardname:kubernetes-dashboardnamespace:kubernetes-dashboardspec:ports:-port:443targetPort:8443nodePort:30001#更改位置1selector:k8s-app:kubernetes-dashboardtype:NodePort#更改位置2...#说明：只需要在service字段添加nodePort:30001即可；

配置后内容：

• 改完之后，我们直接apply一下就好：

[root@k8s-master ~]#kubectl apply -f kubernetes-dashboard.yaml

• 验证

执行kubectl get pods -n kubernetes-dashboard命令：

[root@k8s-master ~]#kubectl get pods -n kubernetes-dashboardNAMEREADYSTATUSRESTARTSAGEdashboard-metrics-scraper-7b59f7d4df-68hj81/1Running097skubernetes-dashboard-74d688b6bc-bkw4h1/1Running097s[root@k8s-master ~]##说明dashboard-metrics-scraper-7b59f7d4df-68hj8(收集指标的容器)kubernetes-dashboard-74d688b6bc-bkw4h(主容器)，只要主容器启动了的话，我们就可以访问了；#注意，这个kubernetes-dashboard叫做命名空间；

浏览访问

访问地址：https:$kubectlcreateserviceaccountdashboard-admin-nkube-system# 用户授权$kubectlcreateclusterrolebindingdashboard-admin--clusterrole=cluster-admin--serviceaccount=kube-system:dashboard-admin# 获取用户Token$kubectldescribesecrets-nkube-system$(kubectl-nkube-systemgetsecret|awk'/dashboard-admin/{print $1}')