Как обнаружить 01-Jan-01 даты в панд из CSV

Question

Я следующий CSV, сохраненный в test.txt:

title, arbitrarydate, value 
hello, 01-Jan-01, 314159 

работает следующий код

dataframe = pd.read_csv('pandatestcsv.txt', parse_dates = True) 
print dataframe.dtypes 

дает этот выход

title   object 
arbitrarydate object 
value    int64 
dtype: object 

Почему pandas не обнаруживает, что randomdate является столбцом даты? Как я могу правильно разобрать это? Я хочу, чтобы он обнаружил, что randomdate является столбцом даты для меня, я не хочу заранее указывать, какие столбцы содержат даты.

Answer 1

Для меня работает:

import pandas as pd 
import io 

temp=u"""title,arbitrarydate,value 
hello,01-Jan-01,314159""" 
#after testing replace io.StringIO(temp) to filename 
df = pd.read_csv(io.StringIO(temp), parse_dates=['arbitrarydate']) 
print (df) 
    title arbitrarydate value 
0 hello 2001-01-01 314159 

print (df.dtypes) 
title     object 
arbitrarydate datetime64[ns] 
value      int64 
dtype: object 

Другое решение добавить позицию столбца в качестве параметра parse_dates:

df = pd.read_csv(io.StringIO(temp), parse_dates=[1]) 
print (df) 
    title arbitrarydate value 
0 hello 2001-01-01 314159 

print (df.dtypes) 
title     object 
arbitrarydate datetime64[ns] 
value      int64 
dtype: object 

Docs.

Вы можете указать все столбцы в parse_dates, но это опасно, потому что иногда некоторые целые числа могут быть разобраны как DateTimes, например:

import pandas as pd 
import io 

temp=u"""title,arbitrarydate,value 
hello,01-Jan-01,2000""" 
#after testing replace io.StringIO(temp) to filename 
df = pd.read_csv(io.StringIO(temp), parse_dates = [0,1,2]) 
print (df) 
    title arbitrarydate  value 
0 hello 2001-01-01 2000-01-01 

print (df.dtypes) 
title     object 
arbitrarydate datetime64[ns] 
value   datetime64[ns] 
dtype: object