# kubeadm completion bash > /etc/profile.d/kubeadm_completion.sh

# . /etc/profile.d/kubeadm_completion.sh

#按下tab键测试
# kubeadm 
certs       config      init        kubeconfig  token       version     
completion  help        join        reset       upgrade     

# kubeadm --help
# Usage: kubeadm [command]
...
# Available Commands:
certs       #处理 kubernetes 证书相关命令
completion  #生成 kubeadm 实现 tab键补全的代码
config      #配置管理集群中的 ConfigMap 中持久化的 kubeadm 集群的配置
help        #命令帮助
init        #初始化集群的第一个节点
join        #加入到现有集群节点
kubeconfig  #文件实用程序
reset       #慎用！！初始化集群！！
token       #管理引导令牌
upgrade     #升级集群版本
version     #打印当前 kubeadm 的版本

# 不指定版本则列出当前 kubeadm 依赖的镜像
# kubeadm config images list
...
k8s.gcr.io/kube-apiserver:v1.23.8
k8s.gcr.io/kube-controller-manager:v1.23.8
k8s.gcr.io/kube-scheduler:v1.23.8
k8s.gcr.io/kube-proxy:v1.23.8
k8s.gcr.io/pause:3.6
k8s.gcr.io/etcd:3.5.1-0
k8s.gcr.io/coredns/coredns:v1.8.6


# 查看当前版本
# kubeadm version
kubeadm version: ...GitVersion:"v1.23.8"...


# 指定版本查询
# kubeadm config images list --kubernetes-version v1.23.8
...
k8s.gcr.io/kube-apiserver:v1.23.8
k8s.gcr.io/kube-controller-manager:v1.23.8
k8s.gcr.io/kube-scheduler:v1.23.8
k8s.gcr.io/kube-proxy:v1.23.8
k8s.gcr.io/pause:3.6
k8s.gcr.io/etcd:3.5.1-0
k8s.gcr.io/coredns/coredns:v1.8.6


#
# docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/kube-apiserver:v1.23.8

kubeadm config print init-defaults > init-kubecluster.yaml

apiVersion: kubeadm.k8s.io/v1beta3
bootstrapTokens:
- groups:
  - system:bootstrappers:kubeadm:default-node-token
  token: abcdef.0123456789abcdef
  ttl: 24h0m0s
  usages:
  - signing
  - authentication
kind: InitConfiguration
localAPIEndpoint:
  advertiseAddress: 1.2.3.4
  bindPort: 6443
nodeRegistration:
  criSocket: /var/run/dockershim.sock
  imagePullPolicy: IfNotPresent
  name: node
  taints: null
---
apiServer:
  timeoutForControlPlane: 4m0s
apiVersion: kubeadm.k8s.io/v1beta3
certificatesDir: /etc/kubernetes/pki
clusterName: kubernetes
controllerManager: {}
dns: {}
etcd:
  local:
    dataDir: /var/lib/etcd
imageRepository: k8s.gcr.io
kind: ClusterConfiguration
kubernetesVersion: 1.23.0
networking:
  dnsDomain: cluster.local
  serviceSubnet: 10.96.0.0/12
scheduler: {}

* --apiserver-advertise-address string #API 服务器所公布的其正在监听的 IP 地址。如果未设置，则使用默认网络接口。可用于为控制平面节点的 API server 设置广播地址（本master节点的IP地址）

* --apiserver-bind-port int32 #API 服务器绑定的端口，默认值：6443

* --control-plane-endpoint string #为控制平面指定一个稳定的 IP 地址或 DNS 名称。可用于为所有控制平面节点设置共享端点。（haproxy+keepalived 的VIP的地址）

* --image-repository string #选择用于拉取控制平面镜像的容器仓库，默认值："k8s.gcr.io"，国内建议改为 registry.cn-hangzhou.aliyuncs.com/google_containers/ 以实现加速

* --kubernetes-version string #为控制平面选择一个特定的 Kubernetes 版本，默认值："stable-1"

* --pod-network-cidr string #指明 pod 网络可以使用的 IP 地址段。如果设置了这个参数，控制平面将会为每一个节点自动分配 CIDRs。

* --service-cidr string #为服务的虚拟 IP 地址另外指定 IP 地址段， 默认值："10.96.0.0/12"

* --service-dns-domain string #为服务另外指定域名，例如："myorg.internal"。 默认值："cluster.local"

--apiserver-cert-extra-sans strings #用于 API Server 服务证书的可选附加主题备用名称（SAN）。可以是 IP 地址和 DNS 名称。

--cert-dir string #保存和存储证书的路径，默认值："/etc/kubernetes/pki"

--certificate-key string #用于加密 kubeadm-certs Secret 中的控制平面证书的密钥。

--config string #kubeadm 配置文件的路径。

--cri-socket string #要连接的 CRI 套接字的路径。如果为空，则 kubeadm 将尝试自动检测此值；仅当安装了多个 CRI 或具有非标准 CRI 插槽时，才使用此选项。

--dry-run #不要应用任何更改；只是输出将要执行的操作。

--feature-gates string #一组用来描述各种功能特性的键值（key=value）对。选项是：
#PublicKeysECDSA=true|false (ALPHA - 默认值=false)
#RootlessControlPlane=true|false (ALPHA - 默认值=false)
#UnversionedKubeletConfigMap=true|false (BETA - 默认值=true)

--ignore-preflight-errors strings #错误将显示为警告的检查列表；例如：'IsPrivilegedUser,Swap'。取值为 'all' 时将忽略检查中的所有错误。

--node-name string #指定节点的名称。

--patches string #它包含名为 "target[suffix][+patchtype].extension" 的文件的目录的路径。 
#例如，"kube-apiserver0+merge.yaml"或仅仅是 "etcd.json"。 
#"target" 可以是 "kube-apiserver"、"kube-controller-manager"、"kube-scheduler"、"etcd" 之一。 
#"patchtype" 可以是 "strategic"、"merge" 或者 "json" 之一， 并且它们与 kubectl 支持的补丁格式相同。
#默认的 "patchtype" 是 "strategic"。 
#"extension" 必须是"json" 或"yaml"。 
#"suffix" 是一个可选字符串，可用于确定首先按字母顺序应用哪些补丁。

--skip-certificate-key-print #不要打印用于加密控制平面证书的密钥。

--skip-phases strings #要跳过的阶段列表

--skip-token-print #跳过打印 'kubeadm init' 生成的默认引导令牌。

--token string #这个令牌用于建立控制平面节点与工作节点间的双向通信。格式为 [a-z0-9]{6}.[a-z0-9]{16} - 示例：abcdef.0123456789abcdef

--token-ttl duration #令牌被自动删除之前的持续时间（例如 1 s，2 m，3 h）。如果设置为 '0'，则令牌将永不过期，默认值：24h0m0s

--upload-certs #将控制平面证书加密上传到 kubeadm-certs Secret 中。说明： kubeadm-certs Secret 和解密密钥会在两个小时后失效。注意： 正如命令输出中所述，证书密钥可访问集群敏感数据。请妥善保管！

-h, --help #init 操作的帮助命令

--rootfs string #[实验] 到 '真实' 主机根文件系统的路径。

# docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/kube-apiserver:v1.23.8

# docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/kube-controller-manager:v1.23.8

# docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/kube-scheduler:v1.23.8

# docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/kube-proxy:v1.23.8

# docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/pause:3.6

# docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/etcd:3.5.1-0

# docker pull registry.cn-hangzhou.aliyuncs.com/google_containers/coredns:v1.8.6

kubeadm init --apiserver-advertise-address 10.0.0.100 --apiserver-bind-port 6443 --control-plane-endpoint 10.0.0.68 --image-repository registry.cn-hangzhou.aliyuncs.com/google_containers/ --kubernetes-version v1.23.8 --pod-network-cidr 10.10.0.0/16 --service-cidr 192.168.1.0/20 --service-dns-domain  --upload-certs kubecluster.local

kubeadm init \
--apiserver-advertise-address 10.0.0.100 \
--apiserver-bind-port 6443 \
--control-plane-endpoint 10.0.0.68 \
--image-repository registry.cn-hangzhou.aliyuncs.com/google_containers/ \
--kubernetes-version v1.23.8 \
--pod-network-cidr 10.10.0.0/16 \
--service-cidr 192.168.1.0/20 \
--upload-certs \
--service-dns-domain  kubecluster.local