Хранение даты и времени в PIG

Question

Я пытаюсь сохранить txt-файл с двумя столбцами даты и времени соответственно. Что-то вроде этого: 1999-01-01 12:08:56

Теперь я хочу, чтобы выполнить некоторые операции, дату, используя PIG, но я хочу, чтобы сохранить дату и время, как это 1999-01-01T12: 08: 56 (я проверил эту ссылку): http://docs.oracle.com/javase/6/docs/api/java/text/SimpleDateFormat.html

то, что я хочу знать, что какой формат можно использовать, в котором моя дата и время находятся в одном столбце, так что я могу кормить его PIG, а затем как загрузить эту дату в свинью. Я знаю, что мы меняем его на datetime, но показываем ошибки. Может кто-нибудь любезно рассказать мне, как загрузить Date & Данные времени вместе. Примером может служить большая помощь.

Answer 1

Пожалуйста, дайте мне знать, если это сработает для вас.

input.txt 
1999-01-01 12:08:56 
1999-01-02 12:08:57 
1999-01-03 12:08:58 
1999-01-04 12:08:59 

PigScript: 
A = LOAD 'input.txt' using PigStorage(' ') as(date:chararray,time:chararray); 
B = FOREACH A GENERATE CONCAT(date,'T',time) as myDateString; 
C = FOREACH B GENERATE ToDate(myDateString); 
dump C; 

Output: 
(1999-01-01T12:08:56.000+05:30) 
(1999-01-02T12:08:57.000+05:30) 
(1999-01-03T12:08:58.000+05:30) 
(1999-01-04T12:08:59.000+05:30) 

Now the myDateString is in date object, you can process this data using all the build in date functions. 

Incase if you want to store the output as in this format 
(1999-01-01T12:08:56) 
(1999-01-02T12:08:57) 
(1999-01-03T12:08:58) 
(1999-01-04T12:08:59) 

you can use REGEX_EXTRACT to parse the each data till "." something like this 

D = FOREACH C GENERATE ToString($0) as temp; 
E = FOREACH D GENERATE REGEX_EXTRACT(temp, '(.*)\\.(.*)', 1); 
dump E; 

Output: 
(1999-01-01T12:08:56) 
(1999-01-02T12:08:57) 
(1999-01-03T12:08:58) 
(1999-01-04T12:08:59)