要收集Kubernetes(K8s)日志,可以使用Filebeat来收集并发送到指定的目标位置。
以下是收集K8s日志的步骤:
配置Filebeat:在Filebeat的配置文件filebeat.yml
中进行以下配置:
filebeat.inputs:
- type: container
paths:
- /var/lib/docker/containers/*/*.log
output.elasticsearch:
hosts: ["elasticsearch:9200"]
这个配置指定了Filebeat收集的数据类型为容器日志,路径为Kubernetes容器的日志文件路径。同时,指定了目标输出为Elasticsearch。
部署Filebeat:根据你的Kubernetes集群环境,可以选择使用Helm Chart来部署Filebeat,或者手动创建Kubernetes部署文件。以下是一个示例的部署文件filebeat-kubernetes.yaml
:
apiVersion: v1
kind: ConfigMap
metadata:
name: filebeat-config
labels:
k8s-app: filebeat
data:
filebeat.yml: |-
filebeat.inputs:
- type: container
paths:
- /var/lib/docker/containers/*/*.log
output.elasticsearch:
hosts: ["elasticsearch:9200"]
---
apiVersion: apps/v1
kind: DaemonSet
metadata:
name: filebeat
labels:
k8s-app: filebeat
spec:
selector:
matchLabels:
k8s-app: filebeat
template:
metadata:
labels:
k8s-app: filebeat
spec:
containers:
- name: filebeat
image: docker.elastic.co/beats/filebeat:7.15.1
args: [
"-c", "/etc/filebeat.yml",
"-e",
]
env:
- name: ELASTICSEARCH_HOST
value: "elasticsearch:9200"
volumeMounts:
- name: config
mountPath: /etc/filebeat.yml
subPath: filebeat.yml
readOnly: true
...
volumes:
- name: config
configMap:
defaultMode: 0600
name: filebeat-config
应用部署文件:使用kubectl命令来应用部署文件,例如:
kubectl apply -f filebeat-kubernetes.yaml
这将会在Kubernetes集群中创建一个DaemonSet,确保每个节点上都会运行一个Filebeat实例。
查看日志:通过Elasticsearch或Kibana等工具来查看收集到的K8s日志。
以上是使用Filebeat来收集K8s日志的一般步骤。你可以根据具体需求进行配置和调整。