Сохранение вывода в текстовом файле в PIG

Question

Мне нужно сохранить окончательный вывод в PIG в текстовом файле.

Мое требование:

Пусть 'Test' будет конечный выходной файл, и мне нужно, чтобы сохранить его в пути. сказать, '/path/'

Мой код:

a = LOAD 'example.csv' USING PigStorage(';'); 

b = FOREACH a GENERATE $0,$1,$2,$3,$6,$7,$8,$9,$11,$12,$13,$14,$20,$24,$25; 

STORE b INTO ‘myoutput’; 

, когда я пытаюсь сохранить окончательный он становится сохраняется как PartFile. Но мне нужно загрузить этот вывод в другом отношении. Если я могу сохранить его в виде текстового файла, я могу его загрузить, но могу ли я использовать файл детали в загрузке? предложите сохранить вывод в текстовом файле.

Answer 1

Поймите команду STORE загрузить в файл. передать этот учебник: https://pig.apache.org/docs/r0.7.0/piglatin_ref2.html#STORE

STORE b INTO ‘myoutput.txt’ using PigStorage(','); 

Answer 2

Вы можете использовать регулярное выражение * для загрузки сохраненного отношения.

STORE b INTO '/path/' USING PigStorage(','); 

и загрузить его как этот

a = LOAD '/path/part-*' INTO USING PigStorage(',');