Может кто-то указать мне в направлении любых ресурсов, которые помогут мне вручную setup/configure Hadoop (1.0.4) на EC2. Я согласен с тем, что есть много ресурсов для этого, используя инструменты, службы и т. Д., Но то, что я ищу, поможет выяснить, какие изменения вносят вручную в файлы conf/*. Xml для ведомых и мастеров в чтобы получить работу Hadoop.Конфигурирование hadoop вручную на ec2
Прямо сейчас, у меня есть 5 экземпляров ec2, и все они могут запускать задания adoop индивидуально в psuedo-распределенном режиме. Итак, мне нужно превратить одного в ведущего, а остальное в рабов, чтобы настроить файлы conf, чтобы подчиненные знали, где находятся наменода и jobtracker, и мастер знает обо всех подчиненных.
Я понимаю, что мне также придется настроить группу безопасности EC2 экземпляров, чтобы они могли разговаривать друг с другом на правом порту. Я думаю, что я в порядке с этим.
Может ли кто-нибудь помочь мне с частью конфигурации или указать на то, что может помочь?
FYI ..... [автоматизирован] (http://www.thecloudavenue.com/2013/04/setting-up -cdh-cluster-on-amazon-ec2-in.html). –