Как автоматизировать экспорт данных в свинье?

Question

После некоторых нарезки и нарезки я получаю относительно небольшой набор данных, который я хочу обрабатывать в автономном режиме. Я в конечном итоге это пишу:

store foo into 'foo' using PigStorage('\t'); 
copyToLocal foo foo; 
rm foo; 
sh cat foo/part* | sort -k... -o foo.tsv; 
sh rm -rf foo; 

Я хотел бы заменить эти 5 строк с макровызовым, но это не взгляда, как я могу - я получаю Unexpected character '|', когда я делаю.

Итак, можно ли повторять эти 5 строк несколько раз в каждом скрипте?

Answer 1

Вы должны заключить команду оболочки с кавычками. Я точно не помню синтаксис. Что-то вроде:

sh bash "your commands" 

Если это не работает для вас, я думаю, что вы можете поместить свои команды в отдельном исполняемом файле оболочки и вызывать его из рис.

Answer 2

I cannot:

Команды оболочки (используется с Grunt) не поддерживаются.

нет даже copyToLocal представляется допустимым.