使用KubeKey安装Kubernetes集群

创建主机#

主机IP	主机名称	角色
10.168.1.20	master	master, etcd
10.168.1.21	node1	worker
10.168.1.22	node2	worker
10.168.1.23	node3	worker
10.168.1.100	nfs	nfs-server

创建NFS持久化存储服务器#

关闭防火墙#

1
systemctl stop firewalld.service
2
systemctl disable firewalld.service

安装nfs#

1
yum -y install nfs-utils rpcbind

配置共享目录#

1
mkdir -p /opt/nfs
2
chmod 755 /opt/nfs

配置nfs#

nfs 的默认配置文件在 /etc/exports 文件下，在该文件中添加下面的配置信息

1
vim /etc/exports
2
/opt/nfs  10.168.1.0/24(rw,sync,no_root_squash)

配置说明：

/opt/nfs：是共享的数据目录
*：表示任何人都有权限连接，当然也可以是一个网段，一个 IP，也可以是域名这里写10.168.1.0/24 我的内网网段
rw：读写的权限
sync：表示文件同时写入硬盘和内存
no_root_squash：当登录 NFS 主机使用共享目录的使用者是 root 时，其权限将被转换成为匿名使用者，通常它的 UID 与 GID，都会变成 nobody 身份

启动服务#

nfs 需要向 rpc 注册，rpc 一旦重启了，注册的文件都会丢失，向他注册的服务都需要重启注意启动顺序，先启动 rpcbind

启动rpcbind服务#

1
systemctl start rpcbind.service
2
systemctl enable rpcbind
3
systemctl status rpcbind

看到上面的 active 证明启动成功了

启动nfs服务#

1
systemctl start nfs.service
2
systemctl enable nfs
3
systemctl status nfs

看到上面的 active 证明启动成功了

查看目录挂载权限#

1
cat /var/lib/nfs/etab

在各个节点安装nfs客户端#

关闭防火墙#

1
systemctl stop firewalld.service
2
systemctl disable firewalld.service

安装nfs#

1
yum -y install nfs-utils rpcbind

启动服务#

nfs 需要向 rpc 注册，rpc 一旦重启了，注册的文件都会丢失，向他注册的服务都需要重启注意启动顺序，先启动 rpcbind

启动rpcbind服务#

1
systemctl start rpcbind.service
2
systemctl enable rpcbind
3
systemctl status rpcbind

看到上面的 active 证明启动成功了

启动nfs服务#

1
systemctl start nfs.service
2
systemctl enable nfs
3
systemctl status nfs

看到上面的 active 证明启动成功了

挂载数据目录#

1
showmount -e 10.168.1.100

创建nfs存储配置文件#

1
vim nfs-client.yaml

1
nfs:
2
  server: "10.168.1.100" # This is the server IP address. Replace it with your own.
3
  path: "/opt/nfs" # Replace the exported directory with your own.
4
storageClass:
5
  defaultClass: false

下载KubeKey#

1
# 国内最好使用国内镜像 能访问GitHub和Googleapis则不需要执行`export KKZONE=cn`这条命令
2
export KKZONE=cn
3

4
# 下载最新稳定版本的KubeKey
5
curl -sfL https://get-kk.kubesphere.io | sh -
6

7
# 如果要下载指定版本的KubeKey 则通过VERSION执行版本 例如下载v3.1.0-alpha.5版本的KubeKey
8
# kubernetes版本过新的话需要使用最新开发版 去https://github.com/kubesphere/kubekey/releases里找
9
# 不然会出现 No SHA256 found for kubeadm. v1.26.9 is not supported 类似的错误
10
curl -sfL https://get-kk.kubesphere.io | VERSION=v3.1.0-alpha.5 sh -

安装Kubernetes和KubeSphere#

给`kk`添加可执行权限#

1
chmod +x kk

创建配置文件#

1
./kk create config --with-kubernetes v1.23.10  --with-kubesphere v3.3.2

如果不指定配置文静名称默认为config-sample.yaml

备注

安装 KubeSphere 3.4 的建议 Kubernetes 版本：v1.20.x、v1.21.x、_ v1.22.x、_ v1.23.x、_ v1.24.x、_ v1.25.x 和 * v1.26.x。带星号的版本可能出现边缘节点部分功能不可用的情况。因此，如需使用边缘节点，推荐安装 v1.21.x。如果不指定 Kubernetes 版本，KubeKey 将默认安装 Kubernetes v1.23.10。有关受支持的 Kubernetes 版本的更多信息，请参见支持矩阵。
如果您在这一步的命令中不添加标志 --with-kubesphere，则不会部署 KubeSphere，只能使用配置文件中的 addons 字段安装，或者在您后续使用 ./kk create cluster 命令时再次添加这个标志。
如果您添加标志 --with-kubesphere 时不指定 KubeSphere 版本，则会安装最新版本的 KubeSphere。

编辑配置文件#

1
vim config-sample.yaml

1
apiVersion: kubekey.kubesphere.io/v1alpha2
2
kind: Cluster
3
metadata:
4
  name: sample
5
spec:
6
  hosts:
7
    - {
8
        name: master,
9
        address: 10.168.1.20,
10
        internalAddress: 10.168.1.20,
11
        user: root,
12
        password: "root",
13
      }
14
    - {
15
        name: node1,
16
        address: 10.168.1.21,
17
        internalAddress: 10.168.1.21,
18
        user: root,
19
        password: "root",
20
      }
21
    - {
22
        name: node2,
23
        address: 10.168.1.22,
24
        internalAddress: 10.168.1.22,
25
        user: root,
26
        password: "root",
27
      }
28
    - {
29
        name: node3,
30
        address: 10.168.1.23,
31
        internalAddress: 10.168.1.23,
32
        user: root,
33
        password: "root",
34
      }
35
  roleGroups:
36
    etcd:
37
      - master
38
    control-plane:
39
      - master
40
    worker:
41
      - node1
42
      - node2
43
      - node3
44
  controlPlaneEndpoint:
45
    ## Internal loadbalancer for apiservers
46
    # internalLoadbalancer: haproxy
47

48
    domain: lb.kubesphere.local
49
    address: ""
50
    port: 6443
51
  kubernetes:
52
    version: v1.23.10
53
    clusterName: cluster.local
54
    autoRenewCerts: true
55
    containerManager: containerd
56
  etcd:
57
    type: kubekey
58
  network:
59
    plugin: calico
60
    kubePodsCIDR: 10.233.64.0/18
61
    kubeServiceCIDR: 10.233.0.0/18
62
    ## multus support. https://github.com/k8snetworkplumbingwg/multus-cni
63
    multusCNI:
64
      enabled: false
65
  registry:
66
    privateRegistry: ""
67
    namespaceOverride: ""
68
    registryMirrors: []
69
    insecureRegistries: []
70
  addons:
71
    - name: nfs-client
72
      namespace: kube-system
73
      sources:
74
        chart:
75
          name: nfs-client-provisioner
76
          repo: https://charts.kubesphere.io/main
77
          valuesFile: /root/nfs-client.yaml
78

79
---
80
apiVersion: installer.kubesphere.io/v1alpha1
81
kind: ClusterConfiguration
82
metadata:
83
  name: ks-installer
84
  namespace: kubesphere-system
85
  labels:
86
    version: v3.3.2
87
spec:
88
  persistence:
89
    storageClass: ""
90
  authentication:
91
    jwtSecret: ""
92
  zone: ""
93
  local_registry: ""
94
  namespace_override: ""
95
  # dev_tag: ""
96
  etcd:
97
    monitoring: false
98
    endpointIps: localhost
99
    port: 2379
100
    tlsEnable: true
101
  common:
102
    core:
103
      console:
104
        enableMultiLogin: true
105
        port: 30880
106
        type: NodePort
107
    # apiserver:
108
    #  resources: {}
109
    # controllerManager:
110
    #  resources: {}
111
    redis:
112
      enabled: false
113
      volumeSize: 2Gi
114
    openldap:
115
      enabled: false
116
      volumeSize: 2Gi
117
    minio:
118
      volumeSize: 20Gi
119
    monitoring:
120
      # type: external
121
      endpoint: http://prometheus-operated.kubesphere-monitoring-system.svc:9090
122
      GPUMonitoring:
123
        enabled: false
124
    gpu:
125
      kinds:
126
        - resourceName: "nvidia.com/gpu"
127
          resourceType: "GPU"
128
          default: true
129
    es:
130
      # master:
131
      #   volumeSize: 4Gi
132
      #   replicas: 1
133
      #   resources: {}
134
      # data:
135
      #   volumeSize: 20Gi
136
      #   replicas: 1
137
      #   resources: {}
138
      logMaxAge: 7
139
      elkPrefix: logstash
140
      basicAuth:
141
        enabled: false
142
        username: ""
143
        password: ""
144
      externalElasticsearchHost: ""
145
      externalElasticsearchPort: ""
146
  alerting:
147
    enabled: false
148
    # thanosruler:
149
    #   replicas: 1
150
    #   resources: {}
151
  auditing:
152
    enabled: false
153
    # operator:
154
    #   resources: {}
155
    # webhook:
156
    #   resources: {}
157
  devops:
158
    enabled: false
159
    # resources: {}
160
    jenkinsMemoryLim: 8Gi
161
    jenkinsMemoryReq: 4Gi
162
    jenkinsVolumeSize: 8Gi
163
  events:
164
    enabled: false
165
    # operator:
166
    #   resources: {}
167
    # exporter:
168
    #   resources: {}
169
    # ruler:
170
    #   enabled: true
171
    #   replicas: 2
172
    #   resources: {}
173
  logging:
174
    enabled: false
175
    logsidecar:
176
      enabled: true
177
      replicas: 2
178
      # resources: {}
179
  metrics_server:
180
    enabled: false
181
  monitoring:
182
    storageClass: ""
183
    node_exporter:
184
      port: 9100
185
      # resources: {}
186
    # kube_rbac_proxy:
187
    #   resources: {}
188
    # kube_state_metrics:
189
    #   resources: {}
190
    # prometheus:
191
    #   replicas: 1
192
    #   volumeSize: 20Gi
193
    #   resources: {}
194
    #   operator:
195
    #     resources: {}
196
    # alertmanager:
197
    #   replicas: 1
198
    #   resources: {}
199
    # notification_manager:
200
    #   resources: {}
201
    #   operator:
202
    #     resources: {}
203
    #   proxy:
204
    #     resources: {}
205
    gpu:
206
      nvidia_dcgm_exporter:
207
        enabled: false
208
        # resources: {}
209
  multicluster:
210
    clusterRole: none
211
  network:
212
    networkpolicy:
213
      enabled: false
214
    ippool:
215
      type: none
216
    topology:
217
      type: none
218
  openpitrix:
219
    store:
220
      enabled: false
221
  servicemesh:
222
    enabled: false
223
    istio:
224
      components:
225
        ingressGateways:
226
          - name: istio-ingressgateway
227
            enabled: false
228
        cni:
229
          enabled: false
230
  edgeruntime:
231
    enabled: false
232
    kubeedge:
233
      enabled: false
234
      cloudCore:
235
        cloudHub:
236
          advertiseAddress:
237
            - ""
238
        service:
239
          cloudhubNodePort: "30000"
240
          cloudhubQuicNodePort: "30001"
241
          cloudhubHttpsNodePort: "30002"
242
          cloudstreamNodePort: "30003"
243
          tunnelNodePort: "30004"
244
        # resources: {}
245
        # hostNetWork: false
246
      iptables-manager:
247
        enabled: true
248
        mode: "external"
249
        # resources: {}
250
      # edgeService:
251
      #   resources: {}
252
  terminal:
253
    timeout: 600

安装#

1
./kk create cluster -f config-sample.yaml

安装日志查看

1
kubectl logs -n kubesphere-system $(kubectl get pod -n kubesphere-system -l 'app in (ks-install, ks-installer)' -o jsonpath='{.items[0].metadata.name}') -f

到这里安装完成

音乐

音乐

创建主机#

创建NFS持久化存储服务器#

关闭防火墙#

安装nfs#

配置共享目录#

配置nfs#

启动服务#

启动rpcbind服务#

启动nfs服务#

查看目录挂载权限#

在各个节点安装nfs客户端#

关闭防火墙#

安装nfs#

启动服务#

启动rpcbind服务#

启动nfs服务#

挂载数据目录#

创建nfs存储配置文件#

下载KubeKey#

安装Kubernetes和KubeSphere#

给`kk`添加可执行权限#

创建配置文件#

编辑配置文件#

安装#

文章分享

音乐

使用KubeKey安装Kubernetes集群

创建主机#

创建NFS持久化存储服务器#

关闭防火墙#

安装nfs#

配置共享目录#

配置nfs#

启动服务#

启动rpcbind服务#

启动nfs服务#

查看目录挂载权限#

在各个节点安装nfs客户端#

关闭防火墙#

安装nfs#

启动服务#

启动rpcbind服务#

启动nfs服务#

挂载数据目录#

创建nfs存储配置文件#

下载KubeKey#

安装Kubernetes和KubeSphere#

给kk添加可执行权限#

创建配置文件#

编辑配置文件#

安装#

文章分享

给`kk`添加可执行权限#