питон CSV интеллектуальный анализатор и столбец соответствия

Question

Я пару тысяч CSV файлов, где большинство из них имеют следующие столбцы

threadSubject 
bccList 
sender_name 
recipient_names 
sender 
dateReceived 
date  
recipients 
subject 

К сожалению, в зависимости от CSV файл каждый столбец, если он присутствует может быть различной columnt номер, что усложняет синтаксический анализ.

Что мне нужно сделать, так это извлечь из входных CSV-файлов только эти выбранные столбцы и поместить их в один выходной файл.

Я новичок в python и уверен, что есть совершенно простой способ достичь этого, но я не могу понять это. Я не уверен, что следует использовать Панды или другой механизм.

В логическом коде должно работать более или менее.

for file in (all files in current folder); do 
    open file; 
    get header and find out at which positions are interesting columns 
    #or match by column name; 

    dump interesting columns into output file in the right order; 
    close file; 
done 

Хитрая часть меня get header...

ли какой-либо из вас есть какие-либо рекомендации, как сделать это в смарт вещий образом?

Я подумал о bash и проанализировал его вручную, но подумал, что может быть хорошей идеей научиться делать это в python с вашей помощью.

p.s. из-за этого мне нужно пройти все электронные письма за последние 5 лет и узнать, в какое время было отправлено первое электронное письмо и последнее электронное письмо в течение каждого дня. CSVs, которые я создал на основе файлов Thunderbird MSF, используя инструмент Mork. Как только я проведу этот синтаксический анализ CSV, мне нужно будет найти простой способ получить время первого электронного письма и последнего электронного письма в тот же день. BUt это еще одна история.

Заранее благодарим за все советы.

Answer 1

Если имена столбцов одинаковы во всех файлах, используйте csv.DictReader для выполнения задания.

Python csv.DictReader Documentation

Вы можете ссылаться на имена полей непосредственно, а не номер столбца.

import csv 
    file = open('Path_to_file','rb') 
    for record in csv.DictReader(file): 
     print record['Column_Name'] 

Надеюсь, это поможет.