怎么在Kubernetes中手动方式部署Prometheus联邦

63次阅读
没有评论

共计 6613 个字符，预计需要花费 17 分钟才能阅读完成。

这篇文章主要介绍“怎么在 Kubernetes 中手动方式部署 Prometheus 联邦”，在日常操作中，相信很多人在怎么在 Kubernetes 中手动方式部署 Prometheus 联邦问题上存在疑惑，丸趣 TV 小编查阅了各式资料，整理出简单好用的操作方法，希望对大家解答”怎么在 Kubernetes 中手动方式部署 Prometheus 联邦”的疑惑有所帮助！接下来，请跟着丸趣 TV 小编一起来学习吧！

   

当我们有多个 Kubernetes 集群的时候，这个时候就需要需要指标汇总的需求了，如上图一样，我们假定在外部部署一个 Prometheus 的 Federate，然后去采集当前 k8s 中的 kube-system 与 default 俩个 namespace。

  环境

我的本地环境使用的 sealos 一键部署，主要是为了便于测试。

OSKubernetesHostNameIPServiceUbuntu 18.041.17.7sealos-k8s-m1192.168.1.151node-exporter prometheus-federate-0Ubuntu 18.041.17.7sealos-k8s-m2192.168.1.152node-exporter grafana alertmanager-0Ubuntu 18.041.17.7sealos-k8s-m3192.168.1.150node-exporter alertmanager-1Ubuntu 18.041.17.7sealos-k8s-node1192.168.1.153node-exporter prometheus-0 kube-state-metricsUbuntu 18.041.17.7sealos-k8s-node2192.168.1.154node-exporter prometheus-1Ubuntu 18.041.17.7sealos-k8s-node2192.168.1.155node-exporter prometheus-2  部署 Prometheus 联邦集群

创建 prometheus-federate 数据目录 

#  在 m1 上执行 
mkdir /data/prometheus-federate/
chown -R 65534:65534 /data/prometheus-federate/

 

创建 Prometheus 联邦 StorageClass 配置文件 

cd /data/manual-deploy/prometheus/
cat prometheus-federate-storageclass.yaml
apiVersion: storage.k8s.io/v1
kind: StorageClass
metadata:
 name: prometheus-federate-lpv
provisioner: kubernetes.io/no-provisioner
volumeBindingMode: WaitForFirstConsumer

 

创建 Prometheus 联邦 pv 配置文件 

apiVersion: v1
kind: PersistentVolume
metadata:
 name: prometheus-federate-lpv-0
spec:
 capacity:
 storage: 10Gi
 volumeMode: Filesystem
 accessModes:
 - ReadWriteOnce
 persistentVolumeReclaimPolicy: Retain
 storageClassName: prometheus-federate-lpv
 local:
 path: /data/prometheus-federate
 nodeAffinity:
 required:
 nodeSelectorTerms:
 - matchExpressions:
 - key: kubernetes.io/hostname
 operator: In
 values:
 - sealos-k8s-m1

 

创建 Prometheus 联邦 configmap 配置文件 

cat prometheus-federate-configmap.yaml
apiVersion: v1
kind: ConfigMap
metadata:
 name: prometheus-federate-config
 namespace: kube-system
data:
 alertmanager_rules.yaml: |
 groups:
 - name: example
 rules:
 - alert: InstanceDown
 expr: up == 0
 for: 1m
 labels:
 severity: page
 annotations:
 summary:  Instance {{ $labels.instance }} down 
 description:  {{ $labels.instance }} of job {{ $labels.job }} has been down for more than 1 minutes. 
 - alert: NodeMemoryUsage
 expr: (node_memory_MemTotal_bytes -(node_memory_MemFree_bytes+node_memory_Buffers_bytes+node_memory_Cached_bytes )) / node_memory_MemTotal_bytes * 100   80
 for: 1m
 labels:
 team: ops
 annotations:
 summary:  cluster:{{ $labels.cluster }} {{ $labels.instance }}: High Memory usage detected 
 description:  {{ $labels.instance }}: Memory usage is above 55% (current value is: {{ $value }} 
 prometheus.yml: |
 global:
 scrape_interval: 30s
 evaluation_interval: 30s
 alerting:
 alertmanagers:
 - static_configs:
 - targets:
 - alertmanager-0.alertmanager-operated:9093
 - alertmanager-1.alertmanager-operated:9093 
 rule_files:
 -  /etc/prometheus/alertmanager_rules.yaml 
 scrape_configs:
 - job_name:  federate 
 scrape_interval: 30s
 honor_labels: true
 metrics_path:  /federate 
 params:
  match[] :
 -  {job=~ kubernetes.*} 
 -  {job= prometheus} 
 static_configs:
 - targets:
 -  prometheus-0.prometheus:9090 
 -  prometheus-1.prometheus:9090 
 -  prometheus-2.prometheus:9090

 

创建 Prometheus 联邦的 statefulse 文件 

cat prometheus-federate-statefulset.yaml
apiVersion: apps/v1
kind: StatefulSet
metadata:
 name: prometheus-federate
 namespace: kube-system
 labels:
 k8s-app: prometheus-federate
 kubernetes.io/cluster-service:  true 
spec:
 serviceName:  prometheus-federate 
 podManagementPolicy:  Parallel 
 replicas: 1
 selector:
 matchLabels:
 k8s-app: prometheus-federate
 template:
 metadata:
 labels:
 k8s-app: prometheus-federate
 annotations:
 scheduler.alpha.kubernetes.io/critical-pod:  
 spec:
 affinity:
 podAntiAffinity:
 requiredDuringSchedulingIgnoredDuringExecution:
 - labelSelector:
 matchExpressions:
 - key: k8s-app
 operator: In
 values:
 - prometheus-federate
 topologyKey:  kubernetes.io/hostname 
 priorityClassName: system-cluster-critical
 hostNetwork: true
 dnsPolicy: ClusterFirstWithHostNet
 containers:
 - name: prometheus-federate-configmap-reload
 image:  jimmidyson/configmap-reload:v0.4.0 
 imagePullPolicy:  IfNotPresent 
 args:
 - --volume-dir=/etc/config
 - --webhook-url=http://localhost:9091/-/reload
 volumeMounts:
 - name: config-volume
 mountPath: /etc/config
 readOnly: true
 resources:
 limits:
 cpu: 10m
 memory: 10Mi
 requests:
 cpu: 10m
 memory: 10Mi
 securityContext:
 runAsUser: 0
 privileged: true
 - image: prom/prometheus:v2.20.0
 imagePullPolicy: IfNotPresent
 name: prometheus
 command:
 -  /bin/prometheus 
 args:
 -  --web.listen-address=0.0.0.0:9091 
 -  --config.file=/etc/prometheus/prometheus.yml 
 -  --storage.tsdb.path=/prometheus 
 -  --storage.tsdb.retention=24h 
 -  --web.console.libraries=/etc/prometheus/console_libraries 
 -  --web.console.templates=/etc/prometheus/consoles 
 -  --web.enable-lifecycle 
 ports:
 - containerPort: 9091
 protocol: TCP
 volumeMounts:
 - mountPath:  /prometheus 
 name: prometheus-federate-data
 - mountPath:  /etc/prometheus 
 name: config-volume
 readinessProbe:
 httpGet:
 path: /-/ready
 port: 9091
 initialDelaySeconds: 30
 timeoutSeconds: 30
 livenessProbe:
 httpGet:
 path: /-/healthy
 port: 9091
 initialDelaySeconds: 30
 timeoutSeconds: 30
 resources:
 requests:
 cpu: 100m
 memory: 100Mi
 limits:
 cpu: 1000m
 memory: 2500Mi
 securityContext:
 runAsUser: 0
 privileged: true
 serviceAccountName: prometheus
 volumes:
 - name: config-volume
 configMap:
 name: prometheus-federate-config
 volumeClaimTemplates:
 - metadata:
 name: prometheus-federate-data
 spec:
 accessModes: [  ReadWriteOnce  ]
 storageClassName:  prometheus-federate-lpv 
 resources:
 requests:
 storage: 5Gi 

 

创建 Prometheus 联邦的 svc 文件 

cat prometheus-service-statefulset.yaml
apiVersion: v1
kind: Service
metadata:
 name: prometheus
 namespace: kube-system
spec:
 ports:
 - name: prometheus
 port: 9090
 targetPort: 9090
 selector:
 k8s-app: prometheus
 clusterIP: None

 

部署 

cd /data/manual-deploy/prometheus/
prometheus-federate-configmap.yaml
prometheus-federate-pv.yaml
prometheus-federate-service-statefulset.yaml
prometheus-federate-statefulset.yaml
prometheus-federate-storageclass.yaml
kubectl apply -f prometheus-federate-storageclass.yaml
kubectl apply -f prometheus-federate-pv.yaml
kubectl apply -f prometheus-federate-configmap.yaml
kubectl apply -f prometheus-federate-statefulset.yaml
kubectl apply -f prometheus-federate-service-statefulset.yaml

 

验证 

# pv
kubectl -n kube-system get pvc |grep federate
prometheus-federate-data-prometheus-federate-0 Bound prometheus-federate-lpv-0 10Gi RWO prometheus-federate-lpv 4h
kubectl -n kube-system get pod |grep federate
prometheus-federate-0 2/2 Running 0 2d4h

 

对此，联邦的配置就完成了，可以在浏览器中访问 192.168.1.151:9091 查看相应的 targets 信息，以及配置的 rules 规则，触发下警报，看看 Alertmanager 集群已经部署成功了。

到此，关于“怎么在 Kubernetes 中手动方式部署 Prometheus 联邦”的学习就结束了，希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习，快去试试吧！若想继续学习更多相关知识，请继续关注丸趣 TV 网站，丸趣 TV 小编会继续努力为大家带来更多实用的文章！

正文完
ks prometheus sealos
发表至： 计算机运维
2023-08-04
 
丸趣
版权声明：本站原创文章，由 丸趣 2023-08-04发表，共计6613字。
转载说明：除特殊说明外本站除技术相关以外文章皆由网络搜集发布，转载请注明出处。
宝塔wordpress建站教程：Linux服务器宝塔建站新手教程
怎么用Puppet安装OpenStack Nova计算云
电脑防火墙怎么设置软件信任
电脑重装系统的作用是什么
评论（没有评论）