Используя API-интерфейс HDFS java, я могу переименовать (переместить) файл в HDFS. Есть ли способ скопировать файл? Я не заинтересован в distcp, я собираюсь скопировать один файл.Как скопировать файл из одной папки HDFS в другую папку HDFS с использованием Java API?
По documentation странице, вы можете использовать API org.apache.hadoop.fs.FileUtil
public static boolean copy(FileSystem srcFS,
Path src,
FileSystem dstFS,
Path dst,
boolean deleteSource,
boolean overwrite,
Configuration conf)
throws IOException
Копирование файлов между файловыми системами.
Вы можете получить FileSystem с ниже API
final FileSystem fs = FileSystem.get(conf);
и передать его ти выше апите
Спасибо, я постараюсь, чтобы увидеть, если он копирует в той же файловой системе – hba
@hba Привет, вы проверили, копирует ли он между тем же файловыми системами? –
@ Даниэль Гайдук - извините, я не помню ... – hba