Spark to HCatalog без Spark SQL

Question

Как подключиться к HCatalog из Spark Job без использования Spark SQL.

Мы используем распределение Cloudera Spark, поскольку в настоящее время у них нет поддержки Spark SQL.

Есть ли какой-либо другой способ, с помощью которого мы можем подключиться o HCatalog от Spark Job?

Answer 1

Почему бы не подключиться к серверу REST HCatalog через WebHCat? https://cwiki.apache.org/confluence/display/Hive/WebHCat

Это можно сделать, не полагаясь на интеграцию Cloudera spark/SparkSQL.