Как base64-декодировать большие файлы в PHP

Question

Мое PHP-приложение имеет API, который может получать достаточно большие файлы (до 32 МБ), которые кодируются base64. Цель состоит в том, чтобы записать эти файлы где-нибудь в моей файловой системе. Конечно, декодировано. Каким будет наименее ресурсоемкий способ сделать это?

Редактировать: Получение файлов через API означает, что у меня есть 32 МБ строка в моем приложении PHP, а не 32 МБ исходного файла где-то на диске. Мне нужно, чтобы эта строка была декодирована в файловую систему.

Используя собственный base64_decode РНР() не разрезая его, потому что он использует много памяти, так что я продолжать работать в ограничение по памяти в PHP (я знаю, я мог бы поднять этот предел, но я не чувствую себя хорошо о разрешении PHP для использования 256 МБ или около того для каждого процесса).

Любые другие варианты? Могу ли я сделать это вручную? Или записать файл на диск, закодированный и вызвать некоторую внешнюю команду? Любая мысль?

Answer 1

Даже если это принятый ответ, у меня есть другое предложение.

Если вы извлекаете данные из API, вы не должны хранить всю полезную нагрузку в переменной. Используя завиток или другие сборщики HTTP, вы можете автоматически сохранять свои данные в файле.

Предполагая, что вы выборки данных с помощью простого GET URL:

$url = 'http://www.example.com/myfile.base64'; 
$target = 'localfile.data'; 

$rhandle = fopen($url,'r'); 
stream_filter_append($rhandle, 'convert.base64-decode'); 

$whandle = fopen($target,'w'); 

stream_copy_to_stream($rhandle,$whandle); 
fclose($rhandle); 
fclose($whandle); 

Преимущества:

• Должно быть быстрее (меньше копирования огромных переменных)
• очень мало накладных расходов памяти

Если вы должны захватить данные из временной переменной, я могу предложить t такой подход:

$data = 'your base64 data'; 
$target = 'localfile.data'; 

$whandle = fopen($target,'w'); 
stream_filter_append($whandle, 'convert.base64-decode',STREAM_FILTER_WRITE); 

fwrite($whandle,$data); 

fclose($whandle); 

Answer 2

Декодировать данные в небольших кусках. Четыре символа данных Base64 равны трем байтам данных «Base256».

Так что вы можете группу каждые 1024 символов и декодировать их до 768 октетов двоичных данных:

$chunkSize = 1024; 
$src = fopen('base64.data', 'rb'); 
$dst = fopen('binary.data', 'wb'); 
while (!feof($src)) { 
    fwrite($dst, base64_decode(fread($src, $chunkSize))); 
} 
fclose($dst); 
fclose($src);