Я внедрил собственный экстрактор для файлов NetCDF и загружал переменные в массивы в памяти перед их выводом. Некоторые массивы могут быть довольно большими, поэтому мне интересно, какой предел памяти в ADLA. Есть ли максимальный объем памяти, который вы можете выделить?Ограничение памяти в Azure Data Lake Analytics
(Team Azure озеро данных здесь)
Каждая вершина имеет 6GB доступны. Имейте в виду, что эта память распределена между ОС, временем выполнения U-SQL и кодом пользователя, запущенным на вершине.
В дополнение к ответу Saveen: Обратите внимание, что строка может содержать не более 4 МБ данных, поэтому ваш SqlArray будет ограничен максимальным размером строки, а также после его возврата из вашего экстрактора.