企业级Devops— 打造完整 CICD 实践指南(七):远程连接Kubernetes集群

76 阅读2分钟

🌐 远程连接Kubernetes集群:实现跨团队、跨平台协作部署

在正式环境中,Kubernetesk8s)和 Jenkins 通常不会部署在同一台服务器上。当我们通过 Jenkins 构建镜像并将其推送到 Harbor 后,再执行 kubectl apply -f k8s-deployment.yaml 文件部署服务时,Jenkins 所在的服务器并没有安装 k8s。为了在 Jenkins 上执行 kubectl 命令,我们可以通过 kubectl 远程连接 k8s 集群,从而实现无安装 K8s 也能执行相关命令。

一、🛠️ 下载kubectl

🖥️ 机器A中安装

https://dl.k8s.io/release/版本号/bin/linux/amd64/kubectl

将连接中的版本号换成你自己的。

比如,我的k8skubectl版本时是:v1.30.0

kubectl_version.png

我的连接:

https://dl.k8s.io/release/v1.30.0/bin/linux/amd64/kubectl

将执行文件下载到/home/k8s/bin文件夹下面 home_k8s_bin.png

文件夹的作用:

  • bin用来放kubectl可执行文件
  • config 用来放连接远程k8s集群配置文件

执行下面命令来赋予可执行权限:

chmod +x kubectl

执行命令看kubectl是否安装成功✅:

kubectl --help

这是安装成功✅的输出:

kubectl_help.png

💡 目前执行kubectl get pods是获取不到信息的

jenkins_kubectl_get_pods.png

二、🔐 远程集群连接配置文件

在已经安装了k8s集群的服务器上执行下面命令生成配置文件:

kubectl config view --minify --flatten > kubeconfig.yaml

⚠️ 注意 cat kubeconfig.yaml 查看apiserver如果为127.0.0.1后面不同服务器kubectl远程连接可能会报错

kubectl_remote_error.png

kubectl_config.png

⚠️ 特别注意: 当使用阿里云服务器时,这里的apiserver改为阿里云的内网地址, 创建集群时的配置文件conf.yaml中修改

然后,将该配置文件传输到 Jenkins 所在的服务器中:

scp ./kubeconfig.yaml root@xxx:/home/k8s/config/

jenkins_kubectl_config.png

三、🖥️ 环境变量设置

jenkins所在服务器中配置, 确保可以直接使用kubectl命令

vim ~/.bashrc

添加下面配置:

export KUBECONFIG=/home/k8s/config/kubeconfig.yaml
KUBERNETES_HOME=/home/k8s
PATH=$PATH:$KUBERNETES_HOME/bin
export PATH KUBERNETES_HOME

让配置生效✅:

source ~/.bashrc

此时再执行kubectl get pods 可以看到我们k8s集群中的pod了。

四、🚀 jenkins pipeline中使用kubectl

有时,需要在pipeline中再配置一次上面的环境变量才可以使用kubectl,我是直接在jenkins系统管理 -> 系统配置 -> 全局属性(环境变量)中配置了一份。

jenkins_env_kubectl.png

jenkins pipeline中也可以直接使用kubectl apply -f k8s-deployment.yaml部署服务了。