Kubernetes(K8s)-k8s服务安装
一、環(huán)境準(zhǔn)備
1、機(jī)器環(huán)境
? ? ? ? 節(jié)點(diǎn)CPU核數(shù)必須是 :>= 2核 ,否則k8s無法啟動 DNS網(wǎng)絡(luò): 最好設(shè)置為 本地網(wǎng)絡(luò)連通的DNS,否則網(wǎng)絡(luò)不通,無法下載一些鏡像 linux內(nèi)核: linux內(nèi)核必須是 4 版本以上,因此必須把linux核心進(jìn)行升級。
? ? ? ?
? ? ? ? 準(zhǔn)備3臺虛擬機(jī)環(huán)境,或者是3臺阿里云服務(wù)器都可。 k8s-master01: 此機(jī)器用來安裝k8s-master的操作環(huán)境 k8s-node01: 此機(jī)器用來安裝k8s node節(jié)點(diǎn)的環(huán)境 k8s-node02: 此機(jī)器用來安裝k8s node節(jié)點(diǎn)的環(huán)境。
2、依賴環(huán)境
? ? ? #1、給每一臺機(jī)器設(shè)置主機(jī)名? ? ? ?
hostnamectl set-hostname k8s-master01hostnamectl set-hostname k8s-node01hostnamectl set-hostname k8s-node02? ? ? #查看主機(jī)名
hostname? ? ?#配置IP host映射關(guān)系
vi /etc/hosts 192.168.66.10 k8s-master01192.168.66.11 k8s-node01192.168.66.12 k8s-node02#2、安裝依賴環(huán)境,注意:每一臺機(jī)器都需要安裝此依賴環(huán)境
yum install -y conntrack ntpdate ntp ipvsadm ipset jq iptables curl sysstat libseccomp wget vim net-tools git iproute lrzsz bash-completion tree bridgeutils unzip bind-utils gcc#3、安裝iptables,啟動iptables,設(shè)置開機(jī)自啟,清空iptables規(guī)則,保存當(dāng)前規(guī)則到默認(rèn)規(guī)則
? ? ? ?# 關(guān)閉防火墻
systemctl stop firewalld && systemctl disable firewalld? ? ? ?# 置空iptables
yum -y install iptables-services && systemctl start iptables && systemctl enable iptables && iptables -F && service iptables save#4、關(guān)閉selinux
? ? ? ?#閉swap分區(qū)【虛擬內(nèi)存】并且永久關(guān)閉虛擬內(nèi)存
swapoff -a && sed -i '/ swap / s/^\(.*\)$/#\1/g' /etc/fstab? ? ? ?#關(guān)閉selinux
setenforce 0 && sed -i 's/^SELINUX=.*/SELINUX=disabled/' /etc/selinux/config#5、升級Linux內(nèi)核為4.44版本
rpm -Uvh http://www.elrepo.org/elrepo-release-7.0-4.el7.elrepo.noarch.rpm? ? ? ?#安裝內(nèi)核
yum --enablerepo=elrepo-kernel install -y kernel-lt? ? ? ?#設(shè)置開機(jī)從新內(nèi)核啟動
grub2-set-default 'CentOS Linux (4.4.189-1.el7.elrepo.x86_64) 7 (Core)'? ? ? ?#注意:設(shè)置完內(nèi)核后,需要重啟服務(wù)器才會生效。
? ? ? ?#查詢內(nèi)核
uname -r注意:新內(nèi)核生效后,要?jiǎng)h除多余的內(nèi)核:
? 查看系統(tǒng)中的全部內(nèi)核
rpm -qa | grep kernel查看系統(tǒng)中的全部內(nèi)核? ? yum remove -y kernel-3.10.0-957.el7.x86_64#6、調(diào)整內(nèi)核參數(shù),對于k8s
cat > kubernetes.conf <<EOF net.bridge.bridge-nf-call-iptables=1 net.bridge.bridge-nf-call-ip6tables=1 net.ipv4.ip_forward=1 net.ipv4.tcp_tw_recycle=0 vm.swappiness=0 vm.overcommit_memory=1 vm.panic_on_oom=0 fs.inotify.max_user_instances=8192 fs.inotify.max_user_watches=1048576 fs.file-max=52706963 fs.nr_open=52706963 net.ipv6.conf.all.disable_ipv6=1 net.netfilter.nf_conntrack_max=2310720 EOF? ? ?#將優(yōu)化內(nèi)核文件拷貝到/etc/sysctl.d/文件夾下,這樣優(yōu)化文件開機(jī)的時(shí)候能夠被調(diào)用
cp kubernetes.conf /etc/sysctl.d/kubernetes.conf? ? ?#手動刷新,讓優(yōu)化文件立即生效
sysctl -p /etc/sysctl.d/kubernetes.conf#7、調(diào)整系統(tǒng)臨時(shí)區(qū) --- 如果已經(jīng)設(shè)置時(shí)區(qū),可略過
? ? ? #設(shè)置系統(tǒng)時(shí)區(qū)為中國/上海
timedatectl set-timezone Asia/Shanghai? ? ?#將當(dāng)前的 UTC 時(shí)間寫入硬件時(shí)鐘
timedatectl set-local-rtc 0? ? ?#重啟依賴于系統(tǒng)時(shí)間的服務(wù)
systemctl restart rsyslogsystemctl restart crond#7、關(guān)閉系統(tǒng)不需要的服務(wù)
systemctl stop postfix && systemctl disable postfix#8、設(shè)置日志保存方式
? ? #1).創(chuàng)建保存日志的目錄
mkdir /var/log/journal? ? #2).創(chuàng)建配置文件存放目錄
mkdir /etc/systemd/journald.conf.d? ? ?#3).創(chuàng)建配置文件
cat > /etc/systemd/journald.conf.d/99-prophet.conf <<EOF [Journal] Storage=persistent Compress=yes SyncIntervalSec=5m RateLimitInterval=30s RateLimitBurst=1000 SystemMaxUse=10G SystemMaxFileSize=200M MaxRetentionSec=2week ForwardToSyslog=no EOF? ? #4).重啟systemd journald的配置
systemctl restart systemd-journald#9、打開文件數(shù)調(diào)整 (可忽略,不執(zhí)行)
echo "* soft nofile 65536" >> /etc/security/limits.confecho "* hard nofile 65536" >> /etc/security/limits.conf#10、kube-proxy 開啟 ipvs 前置條件
modprobe br_netfilter cat > /etc/sysconfig/modules/ipvs.modules <<EOF #!/bin/bash modprobe -- ip_vs modprobe -- ip_vs_rr modprobe -- ip_vs_wrr modprobe -- ip_vs_sh modprobe -- nf_conntrack_ipv4 EOF##使用lsmod命令查看這些文件是否被引導(dǎo)
chmod 755 /etc/sysconfig/modules/ipvs.modules && bash /etc/sysconfig/modules/ipvs.modules && lsmod | grep -e ip_vs -e nf_conntrack_ipv43、docker部署
#1、安裝docker
yum install -y yum-utils device-mapper-persistent-data lvm2#緊接著配置一個(gè)穩(wěn)定(stable)的倉庫、倉庫配置會保存到/etc/yum.repos.d/docker-ce.repo文件 中
yum-config-manager --add-repo https://download.docker.com/linux/centos/dockerce.repo如果上述地址無法下載;請使用阿里源地址(可選):
yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo#更新Yum安裝的相關(guān)Docke軟件包&安裝Docker CE
yum update -y && yum install docker-ce#2、設(shè)置docker daemon文件
? ? ? #創(chuàng)建/etc/docker目錄
mkdir /etc/docker? ? ?#更新daemon.json文件
cat > /etc/docker/daemon.json <<EOF {"exec-opts": ["native.cgroupdriver=systemd"],"log-driver": "json-file","logopts": {"max-size": "100m"}} EOF? ? #注意: 一定注意編碼問題,出現(xiàn)錯(cuò)誤:查看命令:journalctl -amu docker 即可發(fā)現(xiàn)錯(cuò)誤
? ? #創(chuàng)建,存儲docker配置文件
mkdir -p /etc/systemd/system/docker.service.d? ? ?#3、重啟docker服務(wù)
systemctl daemon-reload && systemctl restart docker && systemctl enable docker? ? ?#4、測試docker是否安裝成功
docker version? ? ? ?成功會展示如下:
? ?如果client和server有一個(gè)沒成功,則需重新安裝。
#5、重新安裝步驟:
?#卸載所有的docker
sudo yum remove docker docker-common docker-selinux docker-engine#查詢安裝過的包
yum list installed | grep docker#刪除安裝的軟件包
yum -y remove docker-engine.x86_64?#.刪除鏡像/容器等
rm -rf /var/lib/docker#刪除所有的數(shù)據(jù)卷
docker volume rm $(sudo docker volume ls -q)?刪除完成,安裝步驟同上,需將daemon.json 改為 daemon.conf? 。
4、kubeadm
在master結(jié)點(diǎn)執(zhí)行下面指令:
#1、安裝kubernetes的時(shí)候,需要安裝kubelet, kubeadm等包,但k8s官網(wǎng)給的yum源是 packages.cloud.google.com,國內(nèi)訪問不了,此時(shí)我們可以使用阿里云的yum倉庫鏡像。
cat <<EOF > /etc/yum.repos.d/kubernetes.repo [kubernetes] name=Kubernetes baseurl=http://mirrors.aliyun.com/kubernetes/yum/repos/kubernetes-el7-x86_64 enabled=1 gpgcheck=0 repo_gpgcheck=0 gpgkey=http://mirrors.aliyun.com/kubernetes/yum/doc/yum-key.gpg http://mirrors.aliyun.com/kubernetes/yum/doc/rpm-package-key.gpg EOF#2、安裝kubeadm、kubelet、kubectl
yum install -y kubeadm-1.15.1 kubelet-1.15.1 kubectl-1.15.1# 啟動 kubelet
systemctl enable kubelet && systemctl start kubelet二、集群安裝
1、依賴鏡像
上傳鏡像壓縮包,把壓縮包中的鏡像導(dǎo)入到本地鏡像倉庫
壓縮包下載地址:
? ? ? ?鏈接:https://pan.baidu.com/s/1QdnOf-W5w0OiuKK8ULDHEw?
? ? ? ?提取碼:ylcc
編寫腳本問題,導(dǎo)入鏡像包到本地docker鏡像倉庫:
# kubeadm 初始化k8s集群的時(shí)候,會從gce Google云中下載(pull)相應(yīng)的鏡像,且鏡像相對比較大, 下載比較慢,所以需要從阿里源下載:
#1、導(dǎo)入鏡像腳本代碼 (在任意目錄下創(chuàng)建sh腳本文件:image-load.sh)
#!/bin/bash #注意 鏡像解壓的目錄位置 ls /root/kubeadm-basic.images > /tmp/images-list.txt # 將kubeadm放在臨時(shí)文件tmp中 cd /root/kubeadm-basic.images #進(jìn)入/root/kubeadm-basic.images文件 for i in $(cat /tmp/images-list.txt) #遍歷臨時(shí)文件 do docker load -i $i #做docker鏡像(可從公司鏡像庫下載) done rm -rf /tmp/images-list.txt #刪除臨時(shí)文件#2、修改權(quán)限,可執(zhí)行權(quán)限
chmod 755 image-load.sh#3、開始執(zhí)行,鏡像導(dǎo)入
./image-load.sh#4、傳輸文件及鏡像到其他node節(jié)點(diǎn)?
#遠(yuǎn)程拷貝到k8s-slaver1節(jié)點(diǎn)和k8s-slaver2結(jié)點(diǎn)
scp -r images-load.sh kubeadm-basic.images k8s-slaver1:/root/
復(fù)制完成后,在slaver1結(jié)點(diǎn)和slaver2結(jié)點(diǎn)需要執(zhí)行導(dǎo)入鏡像命令,并檢查docker中是否已經(jīng)存在鏡像。
2、k8s部署
只在master上執(zhí)行:
#初始化主節(jié)點(diǎn) --- 只需要在主節(jié)點(diǎn)執(zhí)行
#1、拉去yaml資源配置文件
kubeadm config print init-defaults > kubeadm-config.yaml#2、修改yaml資源文件
localAPIEndpoint: advertiseAddress: 192.168.66.10 # 注意:修改配置文件的IP地址 kubernetesVersion: v1.15.1 #注意:修改版本號,必須和kubectl版本保持一致 networking: # 指定flannel模型通信 pod網(wǎng)段地址,此網(wǎng)段和flannel網(wǎng)段一致 podSubnet: "10.244.0.0/16" serviceSubnet: "10.96.0.0/12" #指定使用ipvs網(wǎng)絡(luò)進(jìn)行通信 --- apiVersion: kubeproxy.config.k8s.io/v1alpha1 kind: kubeProxyConfiguration featureGates: SupportIPVSProxyMode: true mode: ipvs設(shè)置格式如下:
#3、初始化主節(jié)點(diǎn),開始部署
kubeadm init --config=kubeadm-config.yaml --experimental-upload-certs | tee kubeadm-init.log#注意:執(zhí)行此命令,CPU核心數(shù)量必須大于1核,否則無法執(zhí)行成功
kubernetes主節(jié)點(diǎn)初始化成功后,如下所示:
切記,把下面框中命令復(fù)制出來,備份,后序使用。
要使用自己的,下面是我的。
kubeadm join 192.168.160.10:6443 --token abcdef.0123456789abcdef \--discovery-token-ca-cert-hash sha256:941b75d5fccc9c7684986fd09aa267342b10beb4eaec618fea9f4f4eb0be3329按照k8s指示,執(zhí)行:
##4、初始化成功后執(zhí)行如下命令#創(chuàng)建目錄,保存連接配置緩存,認(rèn)證文件mkdir -p $HOME/.kube #拷貝集群管理配置文件 sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config#授權(quán)給配置文件sudo chown $(id -u):$(id -g) $HOME/.kube/config執(zhí)行命令后查詢node:
? ? ? ? 我們發(fā)現(xiàn)已經(jīng)可以成功查詢node節(jié)點(diǎn)信息了,但是節(jié)點(diǎn)的狀態(tài)卻是NotReady,不是Runing的狀態(tài)。原 因是此時(shí)我們使用ipvs+flannel的方式進(jìn)行網(wǎng)絡(luò)通信,但是flannel網(wǎng)絡(luò)插件還沒有部署,因此節(jié)點(diǎn)狀態(tài) 此時(shí)為NotReady。
3、flannel插件
#部署flannel網(wǎng)絡(luò)插件 --- 只需要在主節(jié)點(diǎn)執(zhí)行 #1、下載flannel網(wǎng)絡(luò)插件
wget https://raw.githubusercontent.com/coreos/flannel/master/Documentation/kubeflannel.yml運(yùn)行上面命令可能會出現(xiàn)如下問題,原因是域名受到污染,不能解析,解決辦法可參考:
https://www.cnblogs.com/sinferwu/p/12726833.html
下載kubeflannel.yml文件后,需要將kubeflannel.yml文件中所有的quay.io替換成quay-mirror.qiniu.com,原因是
quay.io/coreos/flannel:v0.12.0-amd64 無法訪問,需要使用quay-mirror.qiniu.com/coreos/flannel:v0.12.0-amd64。
如果上述解決方案還是無法解決,請直接下載kube-flannel.yml文件,手動放到如下目錄:
此文件下載地址:
? ? ? ?鏈接:https://pan.baidu.com/s/1FxR-YYsd6lXQmDByRu9kEA?
? ? ? ?提取碼:zaq2
我已將上述文件中的域名替換好了,直接可使用。
#2、部署flannel
kubectl create -f kube-flannel.yml部署完成后查看;
發(fā)現(xiàn)有三個(gè)組件掛了。。。。太難了,卡了好幾天
解決:
參考:https://blog.csdn.net/u011663005/article/details/87937800
解決了
解決步驟:
1. kubeadm reset 2. kubeadm init --pod-network-cidr=10.0.0.0/16 3. mkdir -p $HOME/.kube 4. cp -i /etc/kubernetes/admin.conf $HOME/.kube/config 5. chown $(id -u):$(id -g) $HOME/.kube/config 6. kubectl get node -n kube-system 7. kubectl get pod -n kube-system?關(guān)鍵在第2步 ip的確定:
? ? ? ? ?當(dāng)您使用kubeadm init時(shí),請指定pod-network-cidr。確保主機(jī)/主網(wǎng)絡(luò)的IP不在您引用的子網(wǎng)中。
? ? ? ? ?即如果您的網(wǎng)絡(luò)運(yùn)行在192.168.*.*使用10.0.0.0/16
? ? ? ? ?如果您的網(wǎng)絡(luò)是10.0.*.*使用192.168.0.0/16
總結(jié)
以上是生活随笔為你收集整理的Kubernetes(K8s)-k8s服务安装的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 程序中日期、时长等时间相关英文命名问题汇
- 下一篇: APP二维码渠道统计解决方案