Найкращий метод для читання файлів із роздільником нового рядка та відкидання нових рядків?

Я намагаюся визначити найкращий спосіб позбутися нових рядків під час читання у файлах з роздільниками нового рядка в Python.

Я придумав наступний код, включаючи код для викиду для тестування.

import os

def getfile(filename,results):
   f = open(filename)
   filecontents = f.readlines()
   for line in filecontents:
     foo = line.strip('\n')
     results.append(foo)
   return results

blahblah = []

getfile('/tmp/foo',blahblah)

for x in blahblah:
    print x

Пропозиції?

lines = open(filename).read().splitlines()

Ось генератор, який виконує те, що ви просили. У цьому випадку використання rstrip достатньо і трохи швидше, ніж strip.

lines = (line.rstrip('\n') for line in open(filename))

Однак ви, швидше за все, захочете використовувати це, щоб також позбутися кінцевих пробілів.

lines = (line.rstrip() for line in open(filename))

Що ви думаєте про цей підхід?

with open(filename) as data:
    datalines = (line.rstrip('\r\n') for line in data)
    for line in datalines:
        ...do something awesome...

Вираз генератора дозволяє уникнути завантаження цілого файлу в пам'ять і withзабезпечує закриття файлу

for line in file('/tmp/foo'):
    print line.strip('\n')

Просто використовуйте генераторські вирази:

blahblah = (l.rstrip() for l in open(filename))
for x in blahblah:
    print x

Крім того, я хочу порадити вам не читати цілий файл у пам'яті - зациклювання генераторів набагато ефективніше на великих наборах даних.

Я цим користуюся

def cleaned( aFile ):
    for line in aFile:
        yield line.strip()

Тоді я можу робити такі речі.

lines = list( cleaned( open("file","r") ) )

Або я можу розширити очищення за допомогою додаткових функцій, наприклад, скинути порожні рядки або пропустити рядки коментарів або що завгодно.

Я б зробив це так:

f = open('test.txt')
l = [l for l in f.readlines() if l.strip()]
f.close()
print l