Создайте новую базу данных из chunk reader в pandas

Question

Я работаю с массивным файлом excel (14 ГБ), который мне нужно очистить, так что осталась только информация, которая мне нужна. Я сделал файл в Chunks, поэтому мой компьютер перестанет терпеть крах, но теперь вам нужно создать новую базу данных, которая отображает только данные для города, который я ищу.

Я сделал это, чтобы напечатать (фрагмент)

for chunk in reader: 
    print(chunk) 

не уверен, как продолжить, я пытался

df = reader 
df = reader[reader.SitusCity == Miami] 

Но получить этот код ошибки:

--------------------------------------------------------------------------- 
AttributeError       Traceback (most recent call last) 
<ipython-input-7-d4c11720d1c5> in <module>() 
----> 1 df = reader[reader.SitusCity == Miami] 

AttributeError: 'TextFileReader' object has no attribute 'SitusCity' 

Помощь! !!

Answer 1

попробовать это:

chunk in reader: 
    chunk.ix[chunk.SitusCity == 'Miami'].to_excel('output.xlsx', mode='a')