Python: нарезка очень большого двоичного файла

Question

Скажем, у меня есть двоичный файл размером 12 ГБ, и я хочу срезать 8 ГБ из середины его. Я знаю индексы позиций, которые хочу сократить между ними.

Как это сделать? Очевидно, что 12 ГБ не поместится в память, это нормально, но 8 ГБ тоже не будет ... Что я думал, все в порядке, но кажется, что двоичный код, похоже, не нравится, если вы делаете это в кусках! Я добавлял 10 Мбайт одновременно к новому двоичному файлу, и на новом краю каждого фрагмента 10 МБ есть разрывы.

Есть ли способ сделать это с помощью Pythonic?

Answer 1

Вот краткий пример. Адаптировать при необходимости:

def copypart(src,dest,start,length,bufsize=1024*1024): 
    with open(src,'rb') as f1: 
     f1.seek(start) 
     with open(dest,'wb') as f2: 
      while length: 
       chunk = min(bufsize,length) 
       data = f1.read(chunk) 
       f2.write(data) 
       length -= chunk 

if __name__ == '__main__': 
    GIG = 2**30 
    copypart('test.bin','test2.bin',1*GIG,8*GIG)