创建apiserver配置文件：

cat >>/opt/kubernetes/cfg/kube-apiserver< EOF KUBE_APISERVER_OPTS="--logtostderr=true \ --v=4 \ --etcd-servers=https://192.168.135.128:2379,https://192.168.135.129:2379,https://192.168.135.130:2379 \ --bind-address=192.168.135.128 \ --secure-port=6443 \ --advertise-address=192.168.135.128 \ --allow-privileged=true \ --service-cluster-ip-range=10.0.0.0/24 \ --enable-admission-plugins=NamespaceLifecycle,LimitRanger,ServiceAccount,ResourceQuota,NodeRestriction \ --authorization-mode=RBAC,Node \ --enable-bootstrap-token-auth \ --token-auth-file=/opt/kubernetes/cfg/token.csv \ --service-node-port-range=30000-50000 \ --tls-cert-file=/opt/kubernetes/ssl/server.pem\ --tls-private-key-file=/opt/kubernetes/ssl/server-key.pem \ --client-ca-file=/opt/kubernetes/ssl/ca.pem \ --service-account-key-file=/opt/kubernetes/ssl/ca-key.pem \ --etcd-cafile=/opt/etcd/ssl/ca.pem \ --etcd-certfile=/opt/etcd/ssl/server.pem \ --etcd-keyfile=/opt/etcd/ssl/server-key.pem" EOF配置好前面生成的证书，确保能连接etcd。参数说明： * --logtostderr 启用日志 * --v 日志等级 * --etcd-servers etcd集群地址 * --bind-address 监听地址 * --secure-port https安全端口 * --advertise-address 集群通告地址 * --allow-privileged 启用授权 * --service-cluster-ip-range Service虚拟IP地址段 * --enable-admission-plugins 准入控制模块 * --authorization-mode 认证授权，启用RBAC授权和节点自管理 * --enable-bootstrap-token-auth 启用TLS bootstrap功能，后面会讲到 * --token-auth-file token文件 * --service-node-port-range Service Node类型默认分配端口范围

systemd管理apiserver：

cat >>/usr/lib/systemd/system/kube-apiserver.service < EOF [Unit] Description=Kubernetes API Server Documentation=https://github.com/kubernetes/kubernetes[Service] EnvironmentFile=-/opt/kubernetes/cfg/kube-apiserver ExecStart=/opt/kubernetes/bin/kube-apiserver $KUBE_APISERVER_OPTS Restart=on-failure[Install] WantedBy=multi-user.target EOF

systemctl daemon-reload systemctl enable kube-apiserver systemctl start kube-apiserver

部署schduler组件创建schduler配置文件

cat > /opt/kubernetes/cfg/kube-scheduler < EOF KUBE_SCHEDULER_OPTS="--logtostderr=true \ --v=4 \ --master=127.0.0.1:8080 \ --leader-elect" EOF参数说明： * --master 连接本地apiserver * --leader-elect 当该组件启动多个时，自动选举（HA）

systemd管理schduler组件：

cat >/usr/lib/systemd/system/kube-scheduler.service< EOF [Unit] Description=Kubernetes Scheduler Documentation=https://github.com/kubernetes/kubernetes[Service] EnvironmentFile=-/opt/kubernetes/cfg/kube-scheduler ExecStart=/opt/kubernetes/bin/kube-scheduler $KUBE_SCHEDULER_OPTS Restart=on-failure[Install] WantedBy=multi-user.target EOF

启动： systemctl daemon-reload systemctl enable kube-scheduler systemctl start kube-scheduler

部署controller-manager组件
创建controller-manager配置文件：

cat >/opt/kubernetes/cfg/kube-controller-manager < EOF KUBE_CONTROLLER_MANAGER_OPTS="--logtostderr=true \ --v=4 \ --master=127.0.0.1:8080 \ --leader-elect=true \ --address=127.0.0.1 \ --service-cluster-ip-range=10.0.0.0/24 \ --cluster-name=kubernetes \ --cluster-signing-cert-file=/opt/kubernetes/ssl/ca.pem \ --cluster-signing-key-file=/opt/kubernetes/ssl/ca-key.pem\ --root-ca-file=/opt/kubernetes/ssl/ca.pem \ --service-account-private-key-file=/opt/kubernetes/ssl/ca-key.pem" EOF

systemd管理controller-manager组件：

cat >/usr/lib/systemd/system/kube-controller-manager.service < EOF [Unit] Description=Kubernetes Controller Manager Documentation=https://github.com/kubernetes/kubernetes[Service] EnvironmentFile=-/opt/kubernetes/cfg/kube-controller-manager ExecStart=/opt/kubernetes/bin/kube-controller-manager $KUBE_CONTROLLER_MANAGER_OPTS Restart=on-failure[Install] WantedBy=multi-user.target EOF

启动： systemctl daemon-reload systemctl enable kube-controller-manager systemctl start kube-controller-manager

所有组件都已经启动成功，通过kubectl工具查看当前集群组件状态：

ln -s/opt/kubernetes/bin/kubectl/usr/bin/ kubectl get cs NAMESTATUSMESSAGEERROR schedulerHealthyok etcd-0Healthy{"health":"true"} etcd-2Healthy{"health":"true"} etcd-1Healthy{"health":"true"} controller-managerHealthyok 如上输出说明组件都正常。

-----------------------------------下面这些操作在master节点完成：--------------------------------------------
将kubelet-bootstrap用户绑定到系统集群角色

/opt/kubernetes/bin/kubectl create clusterrolebinding kubelet-bootstrap \ --clusterrole=system:node-bootstrapper \ --user=kubelet-bootstrap

创建kubeconfig文件:
在生成kubernetes证书的目录下执行以下命令生成kubeconfig文件：

指定apiserver 地址(如果apiserver做了负载均衡，则填写负载均衡地址) KUBE_APISERVER="https://192.168.135.128:6443" BOOTSTRAP_TOKEN=674c457d4dcf2eefe4920d7dbb6b0ddc

设置集群参数 /opt/kubernetes/bin/kubectl config set-cluster kubernetes \ --certificate-authority=./ca.pem \ --embed-certs=true \ --server=${KUBE_APISERVER} \ --kubeconfig=bootstrap.kubeconfig

设置客户端认证参数 /opt/kubernetes/bin/kubectl config set-credentials kubelet-bootstrap \ --token=${BOOTSTRAP_TOKEN} \ --kubeconfig=bootstrap.kubeconfig

设置上下文参数 /opt/kubernetes/bin/kubectl config set-context default \ --cluster=kubernetes \ --user=kubelet-bootstrap \ --kubeconfig=bootstrap.kubeconfig

设置默认上下文 /opt/kubernetes/bin/kubectl config use-context default --kubeconfig=bootstrap.kubeconfig

创建kube-proxy kubeconfig文件

/opt/kubernetes/bin/kubectl config set-cluster kubernetes \ --certificate-authority=./ca.pem \ --embed-certs=true \ --server=${KUBE_APISERVER} \ --kubeconfig=kube-proxy.kubeconfig/opt/kubernetes/bin/kubectl config set-credentials kube-proxy \ --client-certificate=./kube-proxy.pem \ --client-key=./kube-proxy-key.pem \ --embed-certs=true \ --kubeconfig=kube-proxy.kubeconfig/opt/kubernetes/bin/kubectl config set-context default \ --cluster=kubernetes \ --user=kube-proxy \ --kubeconfig=kube-proxy.kubeconfig/opt/kubernetes/bin/kubectl config use-context default --kubeconfig=kube-proxy.kubeconfig# ls bootstrap.kubeconfigkube-proxy.kubeconfig

----------------------下面这些操作在node节点完成：---------------------------
部署kubelet组件
将前面下载的二进制包中的kubelet和kube-proxy拷贝到/opt/kubernetes/bin目录下。
创建kubelet配置文件：

cat >/opt/kubernetes/cfg/kubelet < EOF KUBELET_OPTS="--logtostderr=true \ --v=4 \ --hostname-override=192.168.135.129 \ --kubeconfig=/opt/kubernetes/cfg/kubelet.kubeconfig \ --bootstrap-kubeconfig=/opt/kubernetes/cfg/bootstrap.kubeconfig \ --config=/opt/kubernetes/cfg/kubelet.config \ --cert-dir=/opt/kubernetes/ssl \ --pod-infra-container-image=registry.cn-hangzhou.aliyuncs.com/google-containers/pause-amd64:3.0" EOF参数说明： * --hostname-override 在集群中显示的主机名 * --kubeconfig 指定kubeconfig文件位置，会自动生成 * --bootstrap-kubeconfig 指定刚才生成的bootstrap.kubeconfig文件 * --cert-dir 颁发证书存放位置 * --pod-infra-container-image 管理Pod网络的镜像

cat >/opt/kubernetes/cfg/kubelet.config< EOF kind: KubeletConfiguration apiVersion: kubelet.config.k8s.io/v1beta1 address: 192.168.135.129 port: 10250 readOnlyPort: 10255 cgroupDriver: cgroupfs clusterDNS: ["10.0.0.2"] clusterDomain: cluster.local. failSwapOn: false authentication: anonymous: enabled: true webhook: enabled: false EOF

systemd管理kubelet组件：

cat > /usr/lib/systemd/system/kubelet.service< EOF [Unit] Description=Kubernetes Kubelet After=docker.service Requires=docker.service[Service] EnvironmentFile=/opt/kubernetes/cfg/kubelet ExecStart=/opt/kubernetes/bin/kubelet $KUBELET_OPTS Restart=on-failure KillMode=process[Install] WantedBy=multi-user.target EOF

启动：

systemctl daemon-reload systemctl enable kubelet systemctl start kubelet

在Master审批Node加入集群：
启动后还没加入到集群中，需要手动允许该节点才可以。在Master节点查看请求签名的Node：

/opt/kubernetes/bin/kubectl get csr /opt/kubernetes/bin/kubectl certificate approve XXXXID /opt/kubernetes/bin/kubectl get node

部署kube-proxy组件
创建kube-proxy配置文件：

cat >/opt/kubernetes/cfg/kube-proxy< EOF KUBE_PROXY_OPTS="--logtostderr=true \ --v=4 \ --hostname-override=192.168.135.129 \ --cluster-cidr=10.0.0.0/24 \//不要改，就是这个ip --kubeconfig=/opt/kubernetes/cfg/kube-proxy.kubeconfig" EOF

systemd管理kube-proxy组件：

cat >/usr/lib/systemd/system/kube-proxy.service < EOF [Unit] Description=Kubernetes Proxy After=network.target[Service] EnvironmentFile=-/opt/kubernetes/cfg/kube-proxy ExecStart=/opt/kubernetes/bin/kube-proxy $KUBE_PROXY_OPTS Restart=on-failure[Install] WantedBy=multi-user.target EOF

启动：

systemctl daemon-reload systemctl enable kube-proxy systemctl start kube-proxy

查看集群状态

# /opt/kubernetes/bin/kubectl get node NAMESTATUSROLESAGEVERSION 10.206.240.111Ready28dv1.11.0 10.206.240.112Ready28dv1.11.0

# /opt/kubernetes/bin/kubectl get cs NAMESTATUSMESSAGEERROR controller-managerHealthyok schedulerHealthyok etcd-2Healthy{"health":"true"} etcd-1Healthy{"health":"true"} etcd-0Healthy{"health":"true"}

运行一个测试示例
创建一个Nginx Web，判断集群是否正常工作：

# /opt/kubernetes/bin/kubectl run nginx --image=nginx --replicas=3 # /opt/kubernetes/bin/kubectl expose deployment nginx --port=88 --target-port=80 --type=NodePort

查看Pod，Service：

# /opt/kubernetes/bin/kubectl get pods NAMEREADYSTATUSRESTARTSAGE nginx-64f497f8fd-fjgt21/1Running328d nginx-64f497f8fd-gmstq1/1Running328d nginx-64f497f8fd-q6wk91/1Running328d

查看pod详细信息：

# /opt/kubernetes/bin/kubectl describe nginx-64f497f8fd-fjgt2 # /opt/kubernetes/bin/kubectl get svc NAMETYPECLUSTER-IPEXTERNAL-IPPORT(S)AGE kubernetesClusterIP10.0.0.1443/TCP28d nginxNodePort10.0.0.17588:38696/TCP28d

打开浏览器输入：http://10.206.240.111:38696

编写yaml文件内容如下： --- apiVersion: v1 kind: Pod metadata: name: kube100-site labels: app: web app1: abc234//labels里面标签的值不能是纯数字 spec: containers: - name: front-end image: daocloud.io/library/nginx ports: - containerPort: 80

创建Pod：

# kubectl apply -f pod.yaml pod "kube100-site" created

查看pod状态

通过get命令来查看被创建的pod。 如果执行完创建pod的命令之后，你的速度足够快，那么使用get命令你将会看到以下的状态： # kubectl get pods NAMEREADYSTATUSRESTARTSAGE hello-world0/1Pending00s# kubectl get pods NAMEREADYSTATUSRESTARTSAGE kube100-site2/2Running01m 注： Pod创建过程中如果出现错误，可以使用kubectl describe 进行排查。各字段含义： NAME: Pod的名称 READY: Pod的准备状况，右边的数字表示Pod包含的容器总数目，左边的数字表示准备就绪的容器数目。 STATUS: Pod的状态。 RESTARTS: Pod的重启次数 AGE: Pod的运行时间。pod的准备状况指的是Pod是否准备就绪以接收请求，Pod的准备状况取决于容器，即所有容器都准备就绪了，Pod才准备就绪。这时候kubernetes的代理服务才会添加Pod作为分发后端，而一旦Pod的准备状况变为false(至少一个容器的准备状况为false),kubernetes会将Pod从代理服务的分发后端移除，即不会分发请求给该Pod。一个pod刚被创建的时候是不会被调度的，因为没有任何节点被选择用来运行这个pod。调度的过程发生在创建完成之后，但是这个过程一般很快，所以你通常看不到pod是处于unscheduler状态的除非创建的过程遇到了问题。pod被调度之后，分配到指定的节点上运行，这时候，如果该节点没有所需要的image，那么将会自动从默认的Docker Hub上pull指定的image，一切就绪之后，看到pod是处于running状态了：

# kubectl get pods NAMEREADYSTATUSRESTARTSAGE my-nginx-379829228-2zjv31/1Running01h my-nginx-379829228-mm8f81/1Running01h

查看pods所在的运行节点： # kubectl get pods -o wide

查看pods定义的详细信息： # kubectl get pods -o yaml # kubectl get pod nginx-8v3cg --output yaml

kubectl get支持以Go Template方式过滤指定的信息，比如查询Pod的运行状态 # kubectl get pods busybox --output=go-template --template={{.status.phase}} Running

[root@k8s-master ~]# kubectl describepodbusybox Name:busybox Namespace:default Node:k8s-node-1/116.196.105.133 Start Time: Thu, 22 Mar 2018 09:51:35 +0800 Labels:name=busybox role=master Status:Pending IP: Controllers: Containers: busybox: Container ID: Image:docker.io/busybox Image ID: Port: Command: sleep 360000 State:Waiting Reason:ContainerCreating Ready:False Restart Count:0 Volume Mounts: Environment Variables: Conditions: TypeStatus InitializedTrue ReadyFalse PodScheduledTrue No volumes. QoS Class:BestEffort Tolerations: Events: FirstSeen LastSeenCountFromSubObjectPathTypeReasonMessage --------- --------------------------------------------------- 7m7m1{default-scheduler }NormalScheduledSuccessfully assigne d busybox to k8s-node-17m1m6{kubelet k8s-node-1}WarningFailedSyncError syncing pod, s kipping: failed to "StartContainer" for "POD" with ErrImagePull: "image pull failed for registry.access.redhat.com/rhel7/pod-infrastructure:latest, this may be because there are no credentials on this request.details: (open /etc/docker/certs.d/registry.access.redhat.com/redhat-ca.crt: no such file or directory)" 6m13s 27{kubelet k8s-node-1}Warning FailedSyncError syncing pod, skipping: failed to "StartContain er" for "POD" with ImagePullBackOff: "Back-off pulling image \"registry.access.redhat.com/rhel7/pod-infrastructure:latest\""各字段含义： Name: Pod的名称 Namespace: Pod的Namespace。 Image(s): Pod使用的镜像 Node: Pod所在的Node。 Start Time: Pod的起始时间 Labels: Pod的Label。 Status: Pod的状态。 Reason: Pod处于当前状态的原因。 Message: Pod处于当前状态的信息。 IP: Pod的PodIP Replication Controllers: Pod对应的Replication Controller。Containers:Pod中容器的信息Container ID: 容器的ID Image: 容器的镜像 Image ID:镜像的ID State: 容器的状态 Ready: 容器的准备状况(true表示准备就绪)。 Restart Count: 容器的重启次数统计 Environment Variables: 容器的环境变量 Conditions: Pod的条件，包含Pod准备状况(true表示准备就绪) Volumes: Pod的数据卷 Events: 与Pod相关的事件列表

进入Pod对应的容器内部 [root@k8s-master /]# kubectl exec -it myweb-76h6w /bin/bash

# kubectl delete pod pod名1 pod名2//单个或多个删除 # kubectl delete pod --all//批量删除 例： [root@k8s-master /]# kubectldelete pod hello-world pod "hello-world" deleted

kubectl delete -f XXX.yaml kubectl apply -f XXX.yaml

kubectl get pods kubectl get pods -o wide /opt/kubernetes/bin/kubectl get svc /opt/kubernetes/bin/kubectl get cs /opt/kubernetes/bin/kubectl get pods kubectl apply -f pod.yaml kubectl logs pod名称 kubectl describepodbusybox kubectl delete pod pod名1 pod名2 kubectl delete -f XXX.yaml kubectl apply -f XXX.yaml kubectl exec -it myweb-76h6w /bin/bash

推荐阅读

• 

  冬天去三亚好玩吗 三亚冬天去哪里旅游便宜又好玩
• 

  管理模式
• 

  股票的当前价格，隆平高科股票
• 

  肺癌|患上肺癌，什么时候会感觉到疼痛？哪些部位较为明显？
• 

  南极又出现西瓜雪是怎么回事 南极出现西瓜雪意味着什么
• 

  c语言如何表示三角函数 c语言中三角函数怎么表示出来
• 

  林内壁挂炉采暖温度显示Lo原因介绍！
• 

  吸脂后多久消肿
• 

  行政机关中止执行条件是怎么规定的
• 

  给朋友圣诞节祝福语简短
• 

  sqlserver添加权限设置，sql server添加用户名和密码
• 

  嘉兴三星冰箱售后电话,嘉兴三星冰箱售后电话地址
• 

  《情了辞》
• 

  虚拟键安卓版,导航键功能介绍一文看懂
• 

  月饼是越到中秋节越贵吗
• 

  刑法放纵制售伪劣商品犯罪行为罪司法规定重要内容有哪些
• 

  成长笔记|成长笔记 | 最爱你的人让你没心没肺，你最爱的人让你撕心裂肺
• 

  豪猪和刺猬有什么区别 有多少人知道
• 

  云顶之弈8天神天使阵容推荐 云顶之弈手游11.7天神天使运营搭配
• 

  庆东锅炉代码13出现这种故障的3种解决步骤？

• federation--kubernetes集群联邦的实现
• (1)redis集群原理及搭建与使用(1)
• K8S|K8S 生态周报| Istio 即将发布重大安全更新，多个版本受影响
• 个人日记|K8s中Pod生命周期和重启策略
• k8s|Scheduling Framework 与 Extender对比及详细介绍
• k8s|k8s(六)（配置管理与集群安全机制）
• 汇编实验（格雷码转二进制（ASCII码）的实现和调试）
• 2021-04-24|2021-04-24 K8s构建Jenkins（1）
• 啥是负载均衡、高并发、分布式、集群（）
• 【数组题】给定一个二进制矩阵|【数组题】给定一个二进制矩阵 A，我们想先水平翻转图像，然后反转图像并返回结果。