k8s集群搭建

Kubernetes官网#

1.前置要求#

• 3台Linux 搭建1个master节点和2个node节点
• 每台机器 2 GB 或更多的运行内存(少了可能起不来)
• 每台机器2CPU或以上
• 集群中的所有机器的网络彼此均能相互(能ping通)连接(公网和内网都可以)
• 节点之中不可以有重复的主机名、MAC 地址或 product_uuid
• 开启机器上的某些端口
• 禁用交换分区

2.设置linux环境#

• 关闭防火墙(开发时 生产环境请自定义规则)

  1
  systemctl stop firewalld
  2
  systemctl disable firewalld

• 关闭selinux

  1
  #全局禁用
  2
  sed -i 's/enforcing/disabled/' /etc/selinux/config
  3
  #禁用当前会话
  4
  setenforce 0

• 关闭swap 内存交换

  1
  #关闭当前
  2
  swapoff -a
  3
  #全局禁用
  4
  vim /etc/fstab
  5
  #将带有swap的注释掉 wq保存
  6
  #/dev/mapper/centos-swap swap    swap    defaults        0 0
  7
  #验证 swap必须全为0  -m:兆单位 -g:吉单位
  8
  free -m

• 设置主机名 不能是localhost

  1
  #查看主机名
  2
  hostname
  3
  #设置主机名
  4
  hostnamectl set-hostname 新主机名

• 添加主机名与IP的对应关系

  1
  vim /etc/hosts

  1
  172.16.10.67 k8s-node1
  2
  172.16.10.68 k8s-node2
  3
  172.16.10.69 k8s-node3

3.安装(所有节点)#

• 卸载之前的docker

  1
  sudo yum remove docker \
  2
  docker-client \
  3
  docker-client-latest \
  4
  docker-common \
  5
  docker-latest \
  6
  docker-latest-logrotate \
  7
  docker-logrotate \
  8
  docker-engine

• 安装docker的前置依赖

  1
  yum install -y yum-utils device-mapper-persistent-data lvm2

• 设置docker的yun源

  1
  sudo yum-config-manager \
  2
  --add-repo \
  3
  http://download.docker.com/linux/centos/docker-ce.repo

• 安装docker以及docker-ci

  1
  sudo yum install -y docker-ce docker-ce-di containerd.io

• 配置docker加速

  1
  sudo mkdir -p /etc/docker
  2
  sudo tee /etc/docker/daemon.json <<-'EOF'
  3
  {
  4
    "registry-mirrors": ["https://akqgo94r.mirror.aliyuncs.com"]
  5
  }
  6
  EOF
  7
  sudo systemctl daemon-reload
  8
  sudo systemctl restart docker

• 设置开机启动

  1
  systemctl enable docker

• 添加阿里yum源

  1
  cat > /etc/yum.repos.d/kubernetes.repo << EOF
  2
  [kubernetes]
  3
  name=Kubernetes
  4
  baseurl=https://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64
  5
  enabled=1
  6
  gpgcheck=0
  7
  repo_gpgcheck=0
  8
  gpgkey=https://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg
  9
  htsts://mirrors.aliyun.com/kubemnetes/yum/doc/rpm-package-key.gpg
  10
  EOF

• 安装kubeadm、kubelet、kubectl

  1
  #查看yum源  可以检测上一步配置的正确性
  2
  yum list|grep kube
  3
  #安装
  4
  yum install -y kubelet-1.17.3 kubeadm-1.17.3 kubectl-1.17.3
  5
  #启动kubelet和设置开机启动
  6
  systemctl enable kubelet
  7
  systemctl start kubelet

• 设置kubeadm、kubelet、kubectl镜像

  • 添加master_images.sh文件 赋予可执行权限

  1
  #!/bin/bash
  2
  
  3
  images=(
  4
    kube-apiserver:v1.17.3
  5
      kube-proxy:v1.17.3
  6
    kube-controller-manager:v1.17.3
  7
    kube-scheduler:v1.17.3
  8
    coredns:1.6.5
  9
    etcd:3.4.3-0
  10
      pause:3.1
  11
  )
  12
  
  13
  for imageName in ${images[@]} ; do
  14
      docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/$imageName
  15
  done

  展开收起

• 初始化master apiserver-advertise-address地址是你自己master的地址

  1
  kubeadm init \
  2
  --apiserver-advertise-address=172.16.10.67 \
  3
  --image-repository registry.cn-hangzhou.aliyuncs.com/google_containers \
  4
  --kubernetes-version v1.17.3 \
  5
  --service-cidr=10.96.0.0/16 \
  6
  --pod-network-cidr=10.244.0.0/16

  • 错误解决

    [preflight] Running pre-flight checks [WARNING IsDockerSystemdCheck]: detected "cgroupfs" as the Docker cgroup driver. The recommended driver is "systemd". Please follow the guide at https://kubernetes.io/docs/setup/cri/ error execution phase preflight: [preflight] Some fatal errors occurred: [ERROR FileContent--proc-sys-net-bridge-bridge-nf-call-iptables]: /proc/sys/net/bridge/bridge-nf-call-iptables contents are not set to 1 [preflight] If you know what you are doing, you can make a check non-fatal with —ignore-preflight-errors=… To see the stack trace of this error execute with --v=5 or higher

    1
    echo "1" >/proc/sys/net/bridge/bridge-nf-call-iptables

  

• 开始使用之前先按照提示执行几个命令

  1
  mkdir -p $HOME/.kube
  2
  sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
  3
  sudo chown $(id -u):$(id -g) $HOME/.kube/config

• 安装网络插件(flannel)

  • 获取kube-flannel.yml 文件

    1
    https://github.com/coreos/flannel/blob/master/Documentation/kube-flannel.yml

  • apply配置文件

    1
    kubectl apply -f kube-flannel.yml

  • 查看pods 都要Running才行

    1
    kubectl get pods --all-namespaces

    

• 查看主节点状态

  1
  kubectl get nodes

  

• master节点Ready了 让其它节点加入

  1
  kubeadm join 172.16.10.67:6443 --token idjrsn.y0g0ji2sbde1ev3r \
  2
      --discovery-token-ca-cert-hash sha256:4204390176617c66a8b40f665a63bfc520a0ae031181006fbfd8b2c182653f6b

  

  • token过期解决 ttl 0为永不过期

    1
    kubeadm token create --ttl 0 --print-join-command

• 监控pod进度

  1
  watch kubectl get pod -n kube-system -o wide

  全部Ready就安装完成了