Panda объединяет несколько csv с одним общим столбцом

Question

У меня есть 13 файлов csv для слияния. Я хотел попробовать pandas и python, но я боюсь.

Существует 3 типа файлов ключ является 1) имеет столбцы ABCD 2) имеет столбцы ABCD (с не содержащие какой-либо из 1) 3) имеет колонки ABCDEFG (с, содержащий все из 1 и 2)

Как я могу объединить эти все в один csv, содержащий всю информацию из всех файлов?

Answer 1

Трудно написать это точно, не видя пример данных. Но это должно заставить вас начать.

import pandas as pd 
df = pd.read_csv('file1.csv') 
df = df.append(pd.read_csv('file2.csv')) #this one adds more rows to the dataframe 
df = df.join(pd.read_csv('file3.csv'), on=[a,b,c,d], how='left') # this one will add columns if they match data 

Answer 2

Вы должны сделать внешнее слияние следующим образом, используя встроенный в reduce method:

files = ['file1.csv', 'file2.csv', ...] # the 13 files 
dataframes = [ pandas.read_csv(f) for f in files ] # add arguments as necessary to the read_csv method 
merged = reduce(lambda left,right: pandas.merge(left,right,on='a', how='outer'), dataframes)