Инструмент для анализа XML в Hadoop

Question

Я хочу знать, есть ли какой-либо инструмент, который я могу использовать для анализа XML-файлов в hadoop. Я знаю, используя сокращение карты, мы можем анализировать XML-файлы, если нет доступных инструментов, чем лучше разбираться в языке scala, java или pig? Пожалуйста, помогите.

Answer 1

В среде hadoop обычно имеется Java. Поэтому я бы использовал «Java Architecture for XML Binding» или JAXB.

Это сравнительно проста в использовании и имеет стратегии развития, которые включают в себя основные подходы:

• У вас есть XML, что кто-то определил, что вы хотите получить доступ в Java.
• У вас есть структуры данных Java, которые вы хотите представлять в XML.

У этого есть много особенностей, но не беспокойтесь о том, чтобы добавить все колокола и свистки, если они вам не нужны. Это также достаточно быстро.

You can find the learning path for it here.

Scala также является отличным выбором, но он немного страдает от более высокой кривой обучения (что не так уж важно, если вы уже знаете Java и подвергаетесь воздействию языков на основе лямбда). Документация является разумной, но иногда она просто отстает от документации, доступной для Java.

Scala будет моим вторым выбором для команды, у которой не было послужной список доставки в Скала. Это не сложнее, и для некоторых проблем Scala намного проще, но без небольшого количества опыта Scala, как правило, решаются проблемы в Scala, использующих подходы, отличные от Scala.

Свинья - это язык, с которым у меня был ограниченный опыт, поэтому я буду оставлять комментарии.