Наименее интенсивный способ чтения файла в PHP

Question

Я читаю файл, содержащий около 50 тыс. Строк, используя функцию file() в Php. Тем не менее, это дает ошибку из памяти, так как содержимое файла хранится в памяти в виде массива. Есть ли другой путь?

Кроме того, длина сохраненных строк является переменной.

Вот код. Также файл 700kB не mB.

private static function readScoreFile($scoreFile) 
{ 
    $file = file($scoreFile); 
    $relations = array(); 

    for($i = 1; $i < count($file); $i++) 
    { 
     $relation = explode("\t",trim($file[$i])); 
     $relation = array(
         'pwId_1' => $relation[0], 
         'pwId_2' => $relation[1], 
         'score' => $relation[2], 
         ); 
     if($relation['score'] > 0) 
     { 
      $relations[] = $relation; 
     } 
    } 

    unset($file); 
    return $relations; 
} 

Answer 1

Использование fopen, fread и fclose читать файл последовательно:

$handle = fopen($filename, 'r'); 
if ($handle) { 
    while (!feof($handle)) { 
     echo fread($handle, 8192); 
    } 
    fclose($handle); 
} 

Answer 2

EDIT после обновления вопрос comments to answer of fabjoa:

Существует, безусловно, что-то подозрительное, если через 700kb файл съедает до 140 МБ памяти с этим кодом, который вы дали (вы могли бы unset $ отношения в конце каждой итерации). Подумайте об использовании отладчика, чтобы пройти через него, чтобы узнать, что произойдет. Вы могли бы также рассмотреть вопрос о перезаписи коды для использования SplFileObject's CSV functions а (or their procedural cousins)

SplFileObject::setCsvControl example

$file = new SplFileObject("data.csv"); 
$file->setFlags(SplFileObject::READ_CSV); 
$file->setCsvControl('|'); 
foreach ($file as $row) { 
    list ($fruit, $quantity) = $row; 
    // Do something with values 
} 

---

Для объектно-ориентированного подхода к итерации по файлу, попробуйте SplFileObject:

SplFileObject::fgets example

$file = new SplFileObject("file.txt"); 
while (!$file->eof()) { 
    echo $file->fgets(); 
} 

SplFileObject::next example

// Read through file line by line 
$file = new SplFileObject("misc.txt"); 
while (!$file->eof()) { 
    echo $file->current(); 
    $file->next(); 
} 

или даже

foreach(new SplFileObject("misc.txt") as $line) { 
    echo $line; 
} 

Довольно много связанных (если не дублировать):

• How to save memory when reading a file in Php?

Answer 3

выделить больше памяти во время операции, может быть что-то как в i_set ('memory_limit', '16M') ;. Не забудьте вернуться к первоначальному распределению памяти после завершения операции

Answer 4

Если вы не знаете максимальную длину линии, и вам не удобно использовать магическое число для максимальной длины линии, тогда вам нужно будет выполнить начальное сканирование файла и определить максимальную длину строки.

Кроме этого следующий код должен помочь вам:

// length is a large number or calculated from an initial file scan 
    while (!feof($handle)) { 
     $buffer = fgets($handle, $length); 
     echo $buffer; 
    }