Pig Распределенный кеш

Question

В чем разница между getShipFiles & getCacheFiles в EvalFunc классе?

Предполагая, что любой файл, указанный в этом методе доступны exec способом из распределенного кэша

Answer 1

getCacheFiles() позволяют UDF указать список файлов HDFS он хотел бы поместить в распределенной кэш.

getShipFiles() позволяют UDF указать список локальных файлов, которые он хотел были бы размещены в распределенной кэш.

Так что getShipFiles получает файлы из локальных файлов, а Cache - их форму HDFS.