Не удалось скопировать данные в hdfs с помощью команд hdfs dfs

Question

Я пытаюсь скопировать данные по hdfs. но ни одна из команд не работает для меня.

Я установил online tutorial для установки кластера с одним узлом. он был установлен правильно, потому что команда $jsp показывает мне все 6 заданий. но когда я пытаюсь скопировать файл в hdfs, он показывает мне ошибку.

команда Я бегу это

hduser@naren-Vostro-3560:~$ hdfs dfs -copyFromLocal /home/nare/Desktop/data/first.txt /app/hadoop/tmp

Ошибка 14/12/30 02:18:09 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable copyFromLocal: '/app/hadoop/tmp': No such file or directory

Я дал все права на входной файл (first.txt)

naren@naren-Vostro-3560:~$ ls -al /home/naren/Desktop/data total 3612 drwxrwxr-x 2 naren naren 4096 Dec 30 01:40 . drwxr-xr-x 3 naren naren 4096 Dec 30 01:40 .. -rwxrwxrwx 1 naren naren 674570 Dec 30 01:37 first.txt -rwxrwxrwx 1 naren naren 1423803 Dec 30 01:39 second.txt -rwxrwxrwx 1 naren naren 1573151 Dec 30 01:40 third.txt

разрешения для папки hdfs также выглядят правильно для меня

hduser@naren-Vostro-3560:~$ ls -l /app/hadoop total 4 drwxr-x--- 5 hduser hadoop 4096 Dec 26 01:22 tmp

Я новичок в Hadoop и Linux и застрял здесь. также я попытался создать новый каталог с

hduser@naren-Vostro-3560:~$ hadoop fs -mkdir -p /user/hduser/sample

и не создающих любой каталог для меня.

Пожалуйста, дайте мне знать, где я иду не так.

Спасибо заранее!

Hadoop Версия: Hadoop 2.5.2 ОС: Ubuntu 14.04

Answer 1

Вы должны убедиться, что/приложение/Hadoop создается в HDFS, а не местные фс. В вашей проверке для каталога вы используете ls -l, который проверяет локальную файловую систему, которая отделена от пространства имен hdfs. Попытайтесь использовать hasoop fs -ls/app/hadoop. Если его там нет, создайте его с помощью hadoop fs -mkdir. - snkherv