温馨提示×

filebeat怎么收集k8s日志

小亿
233
2024-01-10 10:26:57
栏目: 编程语言

要收集Kubernetes(K8s)日志,可以使用Filebeat来收集并发送到指定的目标位置。

以下是收集K8s日志的步骤:

  1. 配置Filebeat:在Filebeat的配置文件filebeat.yml中进行以下配置:

    filebeat.inputs:
    - type: container
      paths:
        - /var/lib/docker/containers/*/*.log
    
    output.elasticsearch:
      hosts: ["elasticsearch:9200"]
    

    这个配置指定了Filebeat收集的数据类型为容器日志,路径为Kubernetes容器的日志文件路径。同时,指定了目标输出为Elasticsearch。

  2. 部署Filebeat:根据你的Kubernetes集群环境,可以选择使用Helm Chart来部署Filebeat,或者手动创建Kubernetes部署文件。以下是一个示例的部署文件filebeat-kubernetes.yaml

    apiVersion: v1
    kind: ConfigMap
    metadata:
      name: filebeat-config
      labels:
        k8s-app: filebeat
    data:
      filebeat.yml: |-
        filebeat.inputs:
        - type: container
          paths:
            - /var/lib/docker/containers/*/*.log
    
        output.elasticsearch:
          hosts: ["elasticsearch:9200"]
    
    ---
    apiVersion: apps/v1
    kind: DaemonSet
    metadata:
      name: filebeat
      labels:
        k8s-app: filebeat
    spec:
      selector:
        matchLabels:
          k8s-app: filebeat
      template:
        metadata:
          labels:
            k8s-app: filebeat
        spec:
          containers:
          - name: filebeat
            image: docker.elastic.co/beats/filebeat:7.15.1
            args: [
              "-c", "/etc/filebeat.yml",
              "-e",
            ]
            env:
            - name: ELASTICSEARCH_HOST
              value: "elasticsearch:9200"
            volumeMounts:
            - name: config
              mountPath: /etc/filebeat.yml
              subPath: filebeat.yml
              readOnly: true
              ...
          volumes:
          - name: config
            configMap:
              defaultMode: 0600
              name: filebeat-config
    
  3. 应用部署文件:使用kubectl命令来应用部署文件,例如:

    kubectl apply -f filebeat-kubernetes.yaml
    

    这将会在Kubernetes集群中创建一个DaemonSet,确保每个节点上都会运行一个Filebeat实例。

  4. 查看日志:通过Elasticsearch或Kibana等工具来查看收集到的K8s日志。

以上是使用Filebeat来收集K8s日志的一般步骤。你可以根据具体需求进行配置和调整。

0