Azure Data Factory не может получить доступ к кластеру HDInsight в ограниченных IP-сетях VNet

Question

У меня есть кластер HDInsight Hadoop (Linux, развернутый отдельно) на Azure VNet (ограничение IP-адресов клиентов с использованием NSG).

Брандмауэр Azure SQL имеет опцию «Разрешить доступ к Azure-сервисам», которая позволяет Data Factory получать доступ к Azure SQL.

В VNet такой опции нет, вам нужно указать диапазон IP-адресов или установить тег (Интернет, виртуальная сеть, AzureLoadBalancer). Я думал, что AzureLoadBalancer решит проблему, но нет - HDInsight все еще скрыт от Azure Data Factory.

Я попытался найти диапазоны портов Data Factory, безуспешно.

Есть ли способ получить доступ к защищенному кластеру HDInsight Linux от Azure Data Factory?

Answer 1

ADF может получить доступ к ресурсам, доступ к которым в противном случае можно получить публично. Если ваш кластер HDInsight находится в VNet, он не может быть общедоступным. Таким образом, ADF не может получить доступ к + организовать его.

ADF действительно нуждается в поддержке в среде VNet, но это займет некоторое время, чтобы приземлиться.

Thanks, Harish