данных Hadoop присоединиться пакет

Question

Я новичок в Hadoop, исследуя данные Hadoop присоединиться пакет Я дал нижеуказанным команду:

hadoop jar /home/biadmin/DataJoin.jar com.datajoin.DataJoin 
     /user/biadmin/Datajoin/customers.txt 
     /user/biadmin/Datajoin/orders.txt 
     /user/biadmin/Datajoin/outpu1 

я получаю ниже исключение ошибок в потоке main

java.lang.NoClassDefFoundError: org.apache.hadoop.contrib.utils.join.DataJoinMapperBase 
    at java.lang.ClassLoader.defineClassImpl(Native Method) 
    at java.lang.ClassLoader.defineClass(ClassLoader.java:364) 
    at java.security.SecureClassLoader.defineClass(SecureClassLoader.java:154) 
    at java.net.URLClassLoader.defineClass(URLClassLoader.java:777) 
    at java.net.URLClassLoader.access$400(URLClassLoader.java:96) 

Answer 1

Вам нужно добавить банку hadoop-datajoin в путь к классам при выполнении задания. Используйте опцию -libjars для добавления дополнительных банок в путь класса. Ваша команда будет такой. Укажите правильный путь к каталогу jar или вы можете загрузить банки.

hadoop jar /home/biadmin/DataJoin.jar com.datajoin.DataJoin 
    -libjars <path>/hadoop-datajoin.jar 
    /user/biadmin/Datajoin/customers.txt 
    /user/biadmin/Datajoin/orders.txt 
    /user/biadmin/Datajoin/outpu1