之前有写过对于传统项目的性能测试监控,但是对于目前市场占比已经很低,大部分项目使用k8s,今天讲一下对于k8s如何去监控。

对于k8s的监控我们所有的操作都要在master下进行。

一、部署grafana

作者会提供一个grafana的yaml文件,对于文件进行适配项目的修改即可

1、修改配置文件

 spec:
      containers:
      - name: grafana
    #镜像版本号 image: grafana/grafana:7.2.1 ports: - containerPort: 3000 env: - name: GF_SECURITY_ADMIN_USER
      # 登录账号 value: admin - name: GF_SECURITY_ADMIN_PASSWORD
      #登录密码 value: admin123 volumeMounts: - mountPath: /var/lib/grafana/abc name: storage volumes: - name: storage nfs:
      #master的 ipv4地址 server: 192.0.0.1 path: /root/nfs-share

2、部署grafana

创建garafana pod

kubectl create -f /root/k8s/node_exporter.yaml

二、部署mysql_exporter

由于mysql_exporter是对mysql数据库进行监控,我们需要把mysql_exporter和mysql数据库打包在一个pod中,所以要对项目原有的mysql yaml文件进行update

      - name: mysql-exporter
        env:
        - name: DATA_SOURCE_NAME
      # 数据库账号:密码@(地址:端口) value: root:123@(127.0.0.1:3306)/ image: prom/mysqld-exporter imagePullPolicy: Always name: mysql-exporter ports: - containerPort: 9104 protocol: TCP volumes: - name: mysql-data nfs:
      #修改为master的ipv4地址 server: 192.168.19.133 path: /root/nfs-share --- apiVersion: v1 kind: Service metadata: name: mysql labels: name: mysql spec: type: NodePort ports: - port: 3306 nodePort: 30306 targetPort: 3306 name: mysql - port: 9104 protocol: TCP targetPort: 9104 nodePort: 30304 name: mysql-exporter selector: name: mysql

上面的为新增内容(有部分会与当前已有的重复),新增后重建pod。

如果有多个节点请在replicas : 后面增加节点数

三、部署node_exporter

apiVersion: apps/v1
# DaemonSet 方式会在所有绑定master的节点下安装 kind: DaemonSet metadata: name: node-exporter namespace: kube-system labels: k8s-app: node-exporter spec: selector: matchLabels: k8s-app: node-exporter template: metadata: labels: k8s-app: node-exporter spec: containers: - image: prom/node-exporter name: node-exporter ports: - containerPort: 9100 protocol: TCP name: http --- apiVersion: v1 kind: Service metadata: labels: k8s-app: node-exporter name: node-exporter namespace: kube-system spec: ports: - name: http port: 9100 nodePort: 31672 protocol: TCP type: NodePort selector: k8s-app: node-exporter

创建node_exporter pod:

kubectl create -f /root/k8s/node_exporter.yaml

 

四、部署Prometheus

1.修改configmap.yaml文件

    - job_name: k8s-nodes
      static_configs:
      - targets:
- 192.168.1.180:31672
     # master 节点ip - 192.168.1.181:31672
# node1 节点ip - 192.168.1.182:31672
# node2 节点ip - job_name: mysql static_configs: - targets: - 192.168.1.180:30304
     # master 节点ip

2.访问prometheus,http://ip:30003/targets

3.访问grafana并配置http://ip:31000/login,用户名和密码为创建pod时设置的账号密码。

4.配置Prometheus数据源 http://ip:30003 

  30003端口是在配置文件prometheus.svc.yml中配置

导入模板后的效果给大家看一下:

 

 

 五、新增节点监控操作

如果集群中新增一个节点,此时我们的监控已经完成,我们应该如何去操作

1.当一个新的节点新增到集群中,node_exporter会自动在新的节点下创建一个pod,所以这里不需要额外操作

2.需要对Prometheus的配置文件进行uodate:

  修改配置文件configmap.yaml:

    - job_name: k8s-nodes
      static_configs:
      - targets:
        - 192.168.1.180:31672
        - 192.168.1.181:31672
        - 192.168.1.182:31672
        # 增加新的节点地址
        - 192.168.1.183:31672

  然后执行下面的操作:

kubectl replace -f configmap.yaml #替换配置文件
kubectl delete -f prometheus.deploy.yml#删除服务
kubectl create -f prometheus.deploy.yml #重建服务

此时,新的节点监控添加完成

 

文章中提到的所有yaml文件分享在下面地址中,可以自行下载,如果需要监控模板可以发送私信索要,如果还不清楚如何导入模板可以查看历史随笔。

链接:https://pan.baidu.com/s/17wV1m1fQK8oA4R92bPDeqg
提取码:1jbk



 

内容来源于网络如有侵权请私信删除