Скопируйте файл hdfs в другое местоположение hdfs с помощью java

Мне нужно скопировать файл hdfs в другое место в hdfs с помощью Java. Источник не следует удалять, просто хотите скопировать исходный файл с новым именем файла в целевом местоположении hdfs.Скопируйте файл hdfs в другое местоположение hdfs с помощью java

Я мог видеть только copyFromLocal, copyToLocal или переименовать в класс FileSystem.java.

Может ли кто-нибудь сказать, есть ли какой-либо метод только для копирования файла hdfs с новым именем в исходный каталог?

источник

2014-02-17 Naveen

Что вас интересует - copyFromLocal. Вы нашли его, но вы не внимательно прочитали, что он делает и как его использовать. – diazazar

@ paul.cioroianu copyFromLocal принимает исходный файл из локальной системы, а не в местоположение HDFS. Я хочу прочитать файл hdfs в качестве источника и сохранить его в другом месте hdf. – Naveen

Используйте скопировать функцию класса FileUtil:

Из Javadoc (http://hadoop.apache.org/docs/stable/api/org/apache/hadoop/fs/FileUtil.html):

public static boolean copy(FileSystem srcFS, 
         Path src, 
         FileSystem dstFS, 
         Path dst, 
         boolean deleteSource, 
         boolean overwrite, 
         Configuration conf) 
       throws IOException

источник

2014-02-17 14:52:53

Спасибо, Это то, что я ищу. – Naveen

Вы всегда можете прочитать ввод и сохранить его как новый файл в нужное место

источник

2014-02-17 12:03:31 ctutte

Скопируйте файл hdfs в другое местоположение hdfs с помощью java

ответ

Смежные вопросы