本文是我自己最近遇到的两种情况,后续有新发现再补充。

    参考文档:
    https://docs.docker.com/engine/reference/commandline/dockerd/

    应用日志过多
    默认情况下,每个 Docker 容器都有 10G 的存储空间,当超出该大小时,容器就会出现问题。

    可以参考官方文档 dm.basesize 参数的说明来修改默认的容器大小:

    指定创建基本设备时要使用的大小,这会限制图像和容器的大小。默认值为10G。请注意,精简设备本质上是“稀疏的”,因此大多数空的10G设备不会在池上使用10 GB的空间。但是,文件系统将为空盒使用更多空间,设备越大。

    可以在守护进程重启时增加基本设备大小,这将允许所有未来的图像和容器(基于这些新图像)具有新的基本设备大小。

    例子

    1. dockerd --storage-opt dm.basesize=50G

    这将使基本设备大小增加到50G。如果现有基本设备大小大于50G,Docker守护程序将抛出错误。用户可以使用此选项扩展基本设备大小,但不允许缩小。

    此值会影响系统范围的“基本”空文件系统,该文件系统可能已被拉出的图像初始化和继承。通常,更改此值需要执行其他步骤:

    1. $ sudo service docker stop
    2. $ sudo rm -rf /var/lib/docker
    3. $ sudo service docker start

    我在这里遇到的问题是因为某个模块会在 10 分钟内输出 1G 的日志,修改日志策略后可以解决该问题。

    Dockerd 日志过多
    有一个 GitLab 的 docker 服务,运行几个月后就会出现无法 push 和 pull 的情况,原因都是因为 /var/lib/docker 磁盘空间已满导致的。而导致磁盘空间占满的原因是因为 dockerd 的日志占用了十几G的空间导致的。

    日志文件的路径形如:/var/lib/docker/containers/CONTAINER_ID/CONTAINER_ID-json.log

    参考:https://stackoverflow.com/questions/31829587/docker-container-logs-taking-all-my-disk-space

    可以参考如下几种解决方案:

    1. 启动容器参数
      参考:https://docs.docker.com/engine/reference/commandline/run/
      使用 —log-opt Log driver options 配置日志策略。
      例如: —log-opt max-size=50m。

    2. 全局默认配置
      在 daemon.json 中配置,linux 中默认位置为 /etc/docker。

    配置示例:

    1. {
    2. "log-driver": "json-file",
    3. "log-opts": {
    4. "max-size": "10m",
    5. "max-file": "3",
    6. "labels": "production_status",
    7. "env": "os,customer"
    8. }
    9. }

    日志配置参考:https://docs.docker.com/config/containers/logging/configure/

    完整 daemon.json 示例参考:https://docs.docker.com/engine/reference/commandline/dockerd/

    1. {
    2. "authorization-plugins": [],
    3. "data-root": "",
    4. "dns": [],
    5. "dns-opts": [],
    6. "dns-search": [],
    7. "exec-opts": [],
    8. "exec-root": "",
    9. "experimental": false,
    10. "features": {},
    11. "storage-driver": "",
    12. "storage-opts": [],
    13. "labels": [],
    14. "live-restore": true,
    15. "log-driver": "json-file",
    16. "log-opts": {
    17. "max-size": "10m",
    18. "max-file":"5",
    19. "labels": "somelabel",
    20. "env": "os,customer"
    21. },
    22. "mtu": 0,
    23. "pidfile": "",
    24. "cluster-store": "",
    25. "cluster-store-opts": {},
    26. "cluster-advertise": "",
    27. "max-concurrent-downloads": 3,
    28. "max-concurrent-uploads": 5,
    29. "default-shm-size": "64M",
    30. "shutdown-timeout": 15,
    31. "debug": true,
    32. "hosts": [],
    33. "log-level": "",
    34. "tls": true,
    35. "tlsverify": true,
    36. "tlscacert": "",
    37. "tlscert": "",
    38. "tlskey": "",
    39. "swarm-default-advertise-addr": "",
    40. "api-cors-header": "",
    41. "selinux-enabled": false,
    42. "userns-remap": "",
    43. "group": "",
    44. "cgroup-parent": "",
    45. "default-ulimits": {
    46. "nofile": {
    47. "Name": "nofile",
    48. "Hard": 64000,
    49. "Soft": 64000
    50. }
    51. },
    52. "init": false,
    53. "init-path": "/usr/libexec/docker-init",
    54. "ipv6": false,
    55. "iptables": false,
    56. "ip-forward": false,
    57. "ip-masq": false,
    58. "userland-proxy": false,
    59. "userland-proxy-path": "/usr/libexec/docker-proxy",
    60. "ip": "0.0.0.0",
    61. "bridge": "",
    62. "bip": "",
    63. "fixed-cidr": "",
    64. "fixed-cidr-v6": "",
    65. "default-gateway": "",
    66. "default-gateway-v6": "",
    67. "icc": false,
    68. "raw-logs": false,
    69. "allow-nondistributable-artifacts": [],
    70. "registry-mirrors": [],
    71. "seccomp-profile": "",
    72. "insecure-registries": [],
    73. "no-new-privileges": false,
    74. "default-runtime": "runc",
    75. "oom-score-adjust": -500,
    76. "node-generic-resources": ["NVIDIA-GPU=UUID1", "NVIDIA-GPU=UUID2"],
    77. "runtimes": {
    78. "cc-runtime": {
    79. "path": "/usr/bin/cc-runtime"
    80. },
    81. "custom": {
    82. "path": "/usr/local/bin/my-runc-replacement",
    83. "runtimeArgs": [
    84. "--debug"
    85. ]
    86. }
    87. },
    88. "default-address-pools":[{"base":"172.80.0.0/16","size":24},
    89. {"base":"172.90.0.0/16","size":24}]
    90. }

    配置参数后需要重启 docker 服务。

    docker-compose 配置
    参考:https://docs.docker.com/compose/compose-file/compose-file-v2/

    配置示例:

    1. logging:
    2. options:
    3. max-size: '12m'
    4. max-file: '5'
    5. driver: json-file

    补充
    写的比较急,贴的链接中都有非常完整的信息,应该都能解决此类问题。
    ————————————————
    版权声明:本文为CSDN博主「isea533」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
    原文链接:https://blog.csdn.net/isea533/article/details/95197468