docker日志和缓冲输出

时间:2016-03-25 09:53:59

标签: bash logging docker buffer bufferedoutputstream

我想连续打印没有换行的点(等待行为)。

这个bash one-liner在我的机器上正常工作:

$ while true; do sleep 1; printf '.'; done
.......^C

但是,当我在Docker容器中运行它时,当我尝试使用docker日志读取其输出时,不会打印输出:

$ docker run -d --name test_logs ubuntu:14.04 bash -c "while true; do sleep 1; printf '.'; done"
60627015ed0a0d331a26e0c48ccad31c641f2142da55d24e10f7ad5737211a18
$ docker logs test_logs
$ docker logs -f test_logs
^C

我可以通过在进程1(bash命令)上使用strace来确认bash循环正在容器中执行:

$ docker exec -t test bash -c 'apt-get install -y strace; strace -p1 -s9999 -e write'
Reading package lists... Done
Building dependency tree
Reading state information... Done
The following NEW packages will be installed:
  strace
0 upgraded, 1 newly installed, 0 to remove and 0 not upgraded.
Need to get 113 kB of archives.
After this operation, 504 kB of additional disk space will be used.
Get:1 http://archive.ubuntu.com/ubuntu/ trusty/main strace amd64 4.8-1ubuntu5 [113 kB]
Fetched 113 kB in 0s (154 kB/s)
debconf: unable to initialize frontend: Dialog
debconf: (TERM is not set, so the dialog frontend is not usable.)
debconf: falling back to frontend: Readline
Selecting previously unselected package strace.
(Reading database ... 11542 files and directories currently installed.)
Preparing to unpack .../strace_4.8-1ubuntu5_amd64.deb ...
Unpacking strace (4.8-1ubuntu5) ...
Setting up strace (4.8-1ubuntu5) ...
Process 1 attached
--- SIGCHLD {si_signo=SIGCHLD, si_code=CLD_EXITED, si_pid=136, si_status=0, si_utime=0, si_stime=0} ---
write(1, ".", 1)                        = 1
--- SIGCHLD {si_signo=SIGCHLD, si_code=CLD_EXITED, si_pid=153, si_status=0, si_utime=0, si_stime=0} ---
write(1, ".", 1)                        = 1
--- SIGCHLD {si_signo=SIGCHLD, si_code=CLD_EXITED, si_pid=154, si_status=0, si_utime=0, si_stime=0} ---
write(1, ".", 1)                        = 1
--- SIGCHLD {si_signo=SIGCHLD, si_code=CLD_EXITED, si_pid=155, si_status=0, si_utime=0, si_stime=0} ---
write(1, ".", 1)                        = 1

......等等。

此外,使用选项-t(不使用docker logs)直接观看输出时,它可以正常工作:

$ docker run -t --name test_logs ubuntu:14.04 bash -c "while true; do sleep 1; printf '.'; done"
...........^C

甚至更奇怪,背景+伪tty(选项-d +选项-t)曾经工作过一次,但之后又不起作用了。

printf是一个行缓冲命令,如果我通过打印换行符添加刷新,它可以工作:

$ docker run -d --name test_logs ubuntu:14.04 bash -c "while true; do sleep 1; printf '.\n'; done"
720e274fcf85f52587b8a2a402465407c5e925c41d80af05ad3a73cebaf7110f
$ docker logs -f test_logs
.
.
.
.
.
.
^C

所以我尝试用stdbuf“unbuffer”printf,没有任何成功:

$ docker run -d --name test_logs ubuntu:14.04 bash -c "while true; do sleep 1; stdbuf -o0 printf '.'; done"
2ba2116190c1b510288144dc5a220669f52f701c17f6f102e6bd6af88de4674e
$  docker logs test_logs
$ docker logs -f test_logs
^C

接下来,我尝试将printf重定向到标准错误,仍然没有成功:

$ docker run -d --name test_logs ubuntu:14.04 bash -c "while true; do sleep 1; printf '.' >&2; done"
b1645b48bd9afd5b72318fba5296157ce1c0346f6a82fa166e802a979c1b0b0f
$ docker logs test_logs
$ docker logs -f test_logs
^C

......同时两者都没有成功:

$  docker run -d --name test_logs ubuntu:14.04 bash -c "while true; do sleep 1; stdbuf -o0 printf '.' >&2; done"

使用echo -n代替printf时遇到了相同的行为。

我的问题:我是否正确地解压缩?如果是的话,是什么让它无效?

寻找对此的见解:)

1 个答案:

答案 0 :(得分:3)

默认的docker日志记录驱动程序(json-file)不支持无缓冲输出。你最终会看到你的点,但只有在填充缓冲区后才会看到。

如果需要无缓冲输出,可以使用syslog日志记录驱动程序。但是,因为它是系统日志,我怀疑它会给你你想要的东西,因为它将向syslog提供无缓冲的输出。记录here on docs.docker.com

由于运行点通常仅在交互情况下有用,因为看到更多点意味着工作仍在继续,您可能只想使用换行符来定期状态,以便docker logs为您提供更好的信息。

此处的解决方案通常是检查您是否处于交互模式,如果是,请显示点:

#!/bin/bash
while true; do
     if [ -t ]; then
         echo -n .
     elif ((++COUNT % 60 == 0)); then
         echo "$(date) still in progress"
     fi
     sleep 1   # or whatever work is going on
done