k8s入门：kube-prometheus-stack 全家桶搭建（Grafana + Prometheus）

柔光的暖阳◎ 2023-09-28 13:01 116阅读 0赞

##### 系列文章 #####

--------------------

第一章：✨ [k8s入门：裸机部署 k8s 集群][k8s_ k8s]  
第二章：✨ [k8s入门：部署应用到 k8s 集群][k8s_ k8s 1]  
第三章：✨ [k8s入门：service 简单使用][k8s_service]  
第四章：✨ [k8s入门：StatefulSet 简单使用][k8s_StatefulSet]  
第五章：✨ [k8s入门：存储（storage）][k8s_storage]  
第六章：✨ [K8S 配置 storageclass 使用 nfs 动态申领本地磁盘空间][K8S _ storageclass _ nfs]  
第七章：✨ [k8s入门：配置 ConfigMap & Secret][k8s_ ConfigMap _ Secret]  
第八章：✨ [k8s入门：k8s入门：Helm 构建 MySQL][k8s_k8s_Helm _ MySQL]  
第九章：✨ [k8s入门：kubernetes-dashboard 安装][k8s_kubernetes-dashboard]  
第十章：✨ [k8s入门：kube-prometheus-stack 全家桶搭建（Grafana + Prometheus）][k8s_kube-prometheus-stack _Grafana _ Prometheus]

--------------------

#### 文章目录 ####

*   *   *   *  系列文章
             *  一、简介
             *  二、安装
             *   *  1、helm 安装
                 *  2、yaml 清单安装
                 *  3、查看资源
                 *  4、解决错误 Error: ImagePullBackOff
                 *  5、安装成功
             *  三、访问测试
             *   *  1、grafana 物理节点访问
                 *  2、Prometheus 物理节点访问

Artifact Hub 官网：[https://artifacthub.io/packages/helm/prometheus-community/kube-prometheus-stack][https_artifacthub.io_packages_helm_prometheus-community_kube-prometheus-stack]

##### 一、简介 #####

安装 kube-prometheus 堆栈、Kubernetes 清单、Grafana 仪表板和 Prometheus 规则的集合，并结合文档和脚本，使用Prometheus Operator 通过 Prometheus 提供易于操作的端到端 Kubernetes 集群监控。

##### 二、安装 #####

###### 1、helm 安装 ######

helm 安装 kube-prometheus-stack

helm repo add prometheus-community https://prometheus-community.github.io/helm-charts
    helm repo update
    helm install prometheus-community/kube-prometheus-stack --generate-name

###### 2、yaml 清单安装 ######

上面可能网络原因安装失败，可以从 GitHub 上下载文件安装

GitHub 下载地址：[https://github.com/prometheus-operator/kube-prometheus][https_github.com_prometheus-operator_kube-prometheus]

使用 manifests 文件夹创建 kube-prometheus-stack

kubectl apply --server-side -f manifests/setup
    until kubectl get servicemonitors --all-namespaces ; do date; sleep 1; echo ""; done
    kubectl apply -f manifests/

想要删除 manifests 文件夹创建的 kube-prometheus-stack 可使用如下命令

kubectl delete --ignore-not-found=true -f manifests/ -f manifests/setup

###### 3、查看资源 ######

使用 manifests 文件夹创建成功会创建一个 namespace/monitoring，以及所需的 service、StatefulSet、Deployment、Secret、ConfigMap 等等…（下面图是错误解决的截图）

![在这里插入图片描述][8fdca771d47a4742b8bb8fd49ea16760.png]

###### 4、解决错误 Error: ImagePullBackOff ######

错误如下，拉去镜像失败  
![在这里插入图片描述][517eed9b650c4e26a18b44fb84249ae2.png]

查看 monitorin 命名空间下的所有资源 `kubectl get all -n monitoring`，发现有两个资源镜像拉去错误  
![在这里插入图片描述][1c7df64645914fd082c8e2f616a45f40.png]  
解决方法

*  方法一：从 dockerHub 上拉去镜像，在使用 docker tag 复制一份镜像与上面拉去镜像名保持一致（需要将镜像下载指定的 node 节点，即 pod 部署哪个节点，哪个节点就需要有该镜像）

# dockerHub 上拉去镜像
    docker pull willdockerhub/prometheus-adapter:v0.9.1
    docker pull bitnami/kube-state-metrics:2.5.0
    # 镜像重命名
    docker tag willdockerhub/prometheus-adapter:v0.9.1 k8s.gcr.io/prometheus-adapter/prometheus-adapter:v0.9.1
    docker tag bitnami/kube-state-metrics:2.5.0 k8s.gcr.io/kube-state-metrics/kube-state-metrics:v2.5.0

*  方法二：在 `kubernetes-dashboard` 修改配置文件并重启，没安装的可参考我上一篇文章  
    ![在这里插入图片描述][4889abbdf2354f63b13d1da67602ce0a.png]  
    如果你没有安装 kubernetes-dashboard，则可以单个 yaml 文件去修改，然后重新部署即可

###### 5、安装成功 ######

重启过后，如下，所有资源启动成功

![在这里插入图片描述][510bdfca93744d43822be78d83f8095e.png]  
如上安装完成所有 service 都是ClusterIP 类型，所有资源只能集群内部相互访问，下面修改 service 类型为 NodePort 类型，保证物理节点可访问

##### 三、访问测试 #####

###### 1、grafana 物理节点访问 ######

`kubernetes-dashboard` 修改 grafana 服务配置，添加物理节点端口 nodePort=13000  
![在这里插入图片描述][29773187108c4f3d91b56772eb6f8027.png]

访问测试 [http://192.168.25.100:13000/][http_192.168.25.100_13000] 默认用户名密码 admin/admin  
![在这里插入图片描述][906f6d27a4a24cc4bd20c9ba4f165588.png]

###### 2、Prometheus 物理节点访问 ######

`kubernetes-dashboard` 修改 prometheus-k8s 配置，添加物理节点端口 nodePort=19090  
![在这里插入图片描述][e7ca10eee5bb42b9b2752de66a4afa34.png]

访问测试 [http://192.168.25.100:19090/][http_192.168.25.100_19090]  
![在这里插入图片描述][9bd157bf73684355a160dc0c5d5fe69f.png]

[k8s_ k8s]: https://blog.csdn.net/qq_41538097/article/details/124869179
[k8s_ k8s 1]: https://blog.csdn.net/qq_41538097/article/details/124884400
[k8s_service]: https://blog.csdn.net/qq_41538097/article/details/125175685
[k8s_StatefulSet]: https://blog.csdn.net/qq_41538097/article/details/125189618
[k8s_storage]: https://blog.csdn.net/qq_41538097/article/details/125215989
[K8S _ storageclass _ nfs]: https://blog.csdn.net/qq_41538097/article/details/125380287
[k8s_ ConfigMap _ Secret]: https://blog.csdn.net/qq_41538097/article/details/125387461
[k8s_k8s_Helm _ MySQL]: https://yixiu.blog.csdn.net/article/details/125442282
[k8s_kubernetes-dashboard]: https://blog.csdn.net/qq_41538097/article/details/125561769
[k8s_kube-prometheus-stack _Grafana _ Prometheus]: https://blog.csdn.net/qq_41538097/article/details/125564711
[https_artifacthub.io_packages_helm_prometheus-community_kube-prometheus-stack]: https://artifacthub.io/packages/helm/prometheus-community/kube-prometheus-stack
[https_github.com_prometheus-operator_kube-prometheus]: https://github.com/prometheus-operator/kube-prometheus
[8fdca771d47a4742b8bb8fd49ea16760.png]: https://img-blog.csdnimg.cn/8fdca771d47a4742b8bb8fd49ea16760.png
[517eed9b650c4e26a18b44fb84249ae2.png]: https://img-blog.csdnimg.cn/517eed9b650c4e26a18b44fb84249ae2.png
[1c7df64645914fd082c8e2f616a45f40.png]: https://img-blog.csdnimg.cn/1c7df64645914fd082c8e2f616a45f40.png
[4889abbdf2354f63b13d1da67602ce0a.png]: https://img-blog.csdnimg.cn/4889abbdf2354f63b13d1da67602ce0a.png
[510bdfca93744d43822be78d83f8095e.png]: https://img-blog.csdnimg.cn/510bdfca93744d43822be78d83f8095e.png
[29773187108c4f3d91b56772eb6f8027.png]: https://img-blog.csdnimg.cn/29773187108c4f3d91b56772eb6f8027.png
[http_192.168.25.100_13000]: http://192.168.25.100:13000/
[906f6d27a4a24cc4bd20c9ba4f165588.png]: https://img-blog.csdnimg.cn/906f6d27a4a24cc4bd20c9ba4f165588.png
[e7ca10eee5bb42b9b2752de66a4afa34.png]: https://img-blog.csdnimg.cn/e7ca10eee5bb42b9b2752de66a4afa34.png
[http_192.168.25.100_19090]: http://192.168.25.100:19090/
[9bd157bf73684355a160dc0c5d5fe69f.png]: https://img-blog.csdnimg.cn/9bd157bf73684355a160dc0c5d5fe69f.png