Python: Когда я должен когда-либо использовать file.read() или file.readlines()?

Question

Я заметил, что если я перебираю файл, который я открыл, гораздо быстрее перебирать его без «чтения».

т.е.

l = open('file','r') 
for line in l: 
    pass (or code) 

гораздо быстрее, чем

l = open('file','r') 
for line in l.read()/l.readlines(): 
    pass (or code) 

2-й петли займет около 1.5x, как много времени (я использовал timeit над точно такой же файл, и результаты были 0,442 против 0,660), и даст тот же результат.

Итак - когда я должен когда-либо использовать .read() или .readlines()?

Так как мне всегда нужно перебирать файл, который я читаю, и после того, как я усердно изучил, насколько болезненно медленный .read() может быть на больших данных - я не могу себе представить, чтобы он когда-либо использовал его снова.

Answer 1

Короткий ответ на ваш вопрос в том, что каждый из этих трех методов чтения битов файла имеют различные варианты использования. Как отмечено выше, f.read() читает файл как отдельную строку и поэтому позволяет относительно легко манипулировать файлом, например, искать или заменять регулярные выражения для всего файла.

f.readline() считывает одну строку файла, что позволяет пользователю анализировать одну строку, не обязательно считывая весь файл. Использование f.readline() также позволяет упростить применение логики при чтении файла, чем полная линейная итерация, например, когда файл изменяется форматно.

Использование синтаксиса for line in f: позволяет пользователю перебирать файл по строке, как указано в вопросе.

(Как отмечалось в другом ответе, эта документация очень хорошо читать):

https://docs.python.org/2/tutorial/inputoutput.html#methods-of-file-objects

EDIT: Ранее утверждали, что Readline() может быть использован, чтобы пропустить линию во время для итерации цикла. Однако, это не работает в Python 2.7, и, возможно, является сомнительной практикой, так что это требование было удалено.

EDIT: Добавлен пример использования при f.readline() и f.read()

Answer 2

Надеюсь, это поможет!

https://docs.python.org/2/tutorial/inputoutput.html#methods-of-file-objects

Если размер опущен или отрицательный, все содержимое файла будет прочитано и возвращено; это ваша проблема, если файл в два раза больше, чем память вашего компьютера.

Извините за все изменения!

Для считывания строк из файла вы можете перебрать объект файла. Это память эффективно, быстро и приводит к простому коду:

for line in f: 
    print line, 

This is the first line of the file. 
Second line of the file