Напишіть Python stdout, щоб подати файл негайно

При спробі записати stdout із сценарію Python у текстовий файл ( python script.py > log), текстовий файл створюється при запуску команди, але власне вміст не записується до завершення сценарію Python. Наприклад:

script.py:

import time
for i in range(10):
    print('bla')
    time.sleep(5)

друкує до stdout кожні 5 секунд при python script.pyдзвінку з , але коли я дзвоню python script.py > log, розмір файлу журналу залишається нульовим, поки сценарій не завершиться. Чи можна безпосередньо записати у файл журналу, щоб ви могли стежити за ходом сценарію (наприклад, використовуючи tail)?

EDIT Виявляється, що python -u script.pyце хитрість, я не знав про буферизацію stdout.

Це відбувається тому, що зазвичай, коли процес STDOUT переспрямовується на щось інше, ніж на термінал, тоді вихід виводиться в буфер розміром з конкретним ОС (можливо, у багатьох випадках 4 к або 8 к). І навпаки, при виході на термінал STDOUT буде буферизований або взагалі не буферизований, тому ви побачите вихід після кожного \nабо для кожного символу.

Загалом ви можете змінити буферизацію STDOUT за допомогою stdbufутиліти:

stdbuf -oL python script.py > log

Тепер, якщо ви tail -F log, ви повинні побачити кожен рядок виводу, як тільки він генерується.

Альтернативно, явне промивання вихідного потоку після кожного друку повинно досягати того ж. Схоже, цього sys.stdout.flush()слід досягти в Python. Якщо ви використовуєте Python 3.3 або більш пізню версію, то printфункція також має flushключове слово , яке робить це: print('hello', flush=True).

Це має зробити цю роботу:

import time, sys
for i in range(10):
    print('bla')
    sys.stdout.flush()
    time.sleep(5)

Оскільки Python буде буферувати stdoutза замовчуванням, тут я використовував sys.stdout.flush()для промивання буфера.

Іншим рішенням буде використання -uперемикача (небуферизованого) python. Отже, зробимо і наступне:

python -u script.py >> log

Варіацією теми використання власного варіанту python для нерозподіленого виводу було б використання #!/usr/bin/python -uв якості першого рядка.

З #!/usr/bin/env pythonцим додатковим аргументом не вдасться працювати, тому, як альтернатива, можна запустити PYTHONUNBUFFERED=1 ./my_scriipt.py > output.txtабо зробити це в два етапи:

$ export PYTHONUNBUFFERED=1
$ ./myscript.py

Вам слід перейти flush=Trueдо printфункції:

import time

for i in range(10):
    print('bla', flush=True)
    time.sleep(5)

Згідно з документацією, за замовчуванням printнічого про примивання не застосовується:

Буферизація виводу зазвичай визначається файлом, але якщо flushаргумент ключового слова є істинним, потік примусово промивається.

А в документації на sysпотоки 's:

Коли інтерактивні, стандартні потоки буферні. Інакше вони блокуються як звичайні текстові файли. Ви можете змінити це значення за допомогою параметра -uкомандного рядка.

Якщо ви застрягли з давньою версією python, вам потрібно викликати flushметод sys.stdoutпотоку:

import sys
import time

for i in range(10):
    print('bla')
    sys.stdout.flush()
    time.sleep(5)