共計(jì) 2550 個(gè)字符，預(yù)計(jì)需要花費(fèi) 7 分鐘才能閱讀完成。
丸趣 TV 小編給大家分享一下云計(jì)算中如何對(duì)容器實(shí)例日志設(shè)置定期清理和回卷，希望大家閱讀完這篇文章之后都有所收獲，下面讓我們一起去探討吧！
引言
Kubernetes 對(duì)于容器實(shí)例的日志收集，并沒(méi)有提供原生的解決方案。但提供使用 kubectl logs 命令查看容器實(shí)例運(yùn)行時(shí)的日志。kubectl logs 命令實(shí)現(xiàn)的基本原理為：容器運(yùn)行時(shí)默認(rèn)將標(biāo)準(zhǔn)輸出和標(biāo)準(zhǔn)錯(cuò)誤中的日志輸出到磁盤上保存。保存至主機(jī)目錄：/var/lib/docker/containers/container_id/ 目錄。用戶調(diào)用 kubectl logs 命令時(shí)，kubelet 讀取對(duì)應(yīng)的日志文件中的數(shù)據(jù)，將數(shù)據(jù)回傳給 master，再由 master 返回到用戶。從而實(shí)現(xiàn)用戶對(duì)日志的查看。
騰訊云容器服務(wù)利用 kubectl logs 命令，實(shí)現(xiàn)在控制臺(tái)即可查看對(duì)應(yīng)容器實(shí)例的日志，并且提供查看某個(gè)特定時(shí)間段的日志的功能，這極大的方便了用戶對(duì)容器實(shí)例中的程序進(jìn)行定位和跟蹤。但是，由于在容器實(shí)例日志保存在本地，當(dāng)程序中大量打印日志時(shí)，很容易造成主機(jī)上的磁盤空間大量被占用。在日志服務(wù)上線一段時(shí)間后，發(fā)現(xiàn)用戶遇到這種情況時(shí)，一般是手動(dòng)去清理日志。我們就考慮是不是有比較簡(jiǎn)單的方式，在集群節(jié)點(diǎn)對(duì)日志進(jìn)行定期清理和回卷。
通過(guò) logrotate 服務(wù)實(shí)現(xiàn)日志定期清理和回卷
logrotate 是個(gè)十分有用的工具，它可以自動(dòng)對(duì)日志進(jìn)行截?cái)啵ɑ蜉喲嚎s以及刪除舊的日志文件。例如，你可以設(shè)置 logrotate，讓 /var/log/foo 日志文件每 30 天輪循，并刪除超過(guò) 6 個(gè)月的日志。配置完后，logrotate 的運(yùn)作完全自動(dòng)化，不必進(jìn)行任何進(jìn)一步的人為干預(yù)。
但如果按照之前的部署方式，需要手動(dòng)在每個(gè)節(jié)點(diǎn)上都安裝和配置對(duì)應(yīng) logrotate 工具。如果通過(guò) Kubernetes 容器服務(wù)編排的能力，將 logrotate 通過(guò) Kubernetes 中服務(wù)的方式部署到各個(gè)節(jié)點(diǎn)上，這樣既可以實(shí)現(xiàn)只需要一次部署，部署到所有節(jié)點(diǎn)。并且通過(guò)容器的方式保證了 logrotate 配置的一致性。
具體的實(shí)施方案如下圖所示：
方案的具體實(shí)現(xiàn)是在 Kubernetes 集群中，創(chuàng)建 DaemonSet 資源實(shí)現(xiàn)。DaemonSet 資源會(huì)在每個(gè) Node 節(jié)點(diǎn)上都部署一個(gè) logrotate 的容器實(shí)例，并且在容器實(shí)例中設(shè)置映射主機(jī)的 log 日志目錄，從而實(shí)現(xiàn)日志的定時(shí)清理和回卷。
創(chuàng)建 DaemonSet 的示例如下：
apiVersion: extensions/v1beta1
kind: DaemonSet
metadata:
name: logrotate
spec:
template:
metadata:
labels:
app: logging
id: logrotate
name: logrotate
spec:
containers:
- name: logrotate-es
image: blacklabelops/logrotate
securityContext:
privileged: true
volumeMounts:
- name: containers
mountPath: /var/lib/docker/containers
- name: varlog
mountPath: /var/log/docker
- name: logs
mountPath: /logs
env:
- name: LOGS_DIRECTORIES
value: /var/lib/docker/containers /var/log/docker
- name: LOGROTATE_INTERVAL
value: hourly
- name: LOGROTATE_OLDDIR
value: /logs
volumes:
- hostPath:
path: /var/lib/docker/containers
name: containers
- hostPath:
path: /var/log/docker
name: varlog
- hostPath:
path: /var/log/containers/
name: logs
使用這個(gè) yaml 文件，可以直接在 Kubernetes 中進(jìn)行部署。
# kubectl create -f logrotate_ds.yaml
daemonset logrotate在示例的 yaml 文件中，logrotate 服務(wù)將按照定時(shí) (1 小時(shí)) 的對(duì)日志進(jìn)行回卷，回卷超過(guò) 5 個(gè)副本后則會(huì)對(duì)日志進(jìn)行清理。如果有需要，可以修改相應(yīng)的參數(shù)，設(shè)置不同的回卷規(guī)則和清理規(guī)則。詳細(xì)的參數(shù)說(shuō)明可以參考：https://github.com/blacklabelops/logrotate。
通過(guò)修改 dockerd 參數(shù)進(jìn)行回卷和清理
由于 Kubernetes 的日志收集，底層是通過(guò) docker 來(lái)實(shí)現(xiàn)。而 docker 提供了一定的日志回卷和清理功能。可以通過(guò)在 dockerd 的啟動(dòng)參數(shù)中，增加 log-opts()參數(shù)實(shí)現(xiàn)對(duì)日志的回卷和清理, 其中 max-size 參數(shù)設(shè)置日志一個(gè)副本的最大值，max-file 設(shè)置日志的最大的副本數(shù)。超過(guò)這個(gè)副本數(shù)則會(huì)對(duì)日志進(jìn)行刪除。
具體的修改過(guò)程包括三個(gè)步驟：
1、創(chuàng)建 /etc/dockerd/daemon.json
{
log-driver : json-file ,
log-opts :{
max-size : 10m , max-file : 3
}
}參數(shù)說(shuō)明：設(shè)置單個(gè)容器日志超過(guò) 10M 則進(jìn)行回卷，回卷的副本數(shù)超過(guò) 3 個(gè)就進(jìn)行清理。
2、修改 dockerd 服務(wù)配置文件
在 /etc/systemd/system/multi-user.target.wants/dockerd.serviced 文件中
添加 dockerd 啟動(dòng)參數(shù) –config-file=/etc/docker/daemon.json
3、重新啟動(dòng) dockerd 服務(wù)
systemctl daemon-reload
service dockerd restart看完了這篇文章，相信你對(duì)“云計(jì)算中如何對(duì)容器實(shí)例日志設(shè)置定期清理和回卷”有了一定的了解，如果想了解更多相關(guān)知識(shí)，歡迎關(guān)注丸趣 TV 行業(yè)資訊頻道，感謝各位的閱讀！
