2015-03-08 3 views
0

Мы пытаемся создать веб-сервис Azure ML, который получит файл данных (.csv), выполнит некоторую обработку и вернет два похожих файла. Поддержка Python, недавно добавленная в платформу azure ML, была очень полезна, и мы смогли успешно перенести наш код, запустить его в режиме эксперимента и опубликовать веб-сервис.Поддержка Python для Azure ML - проблема скорости

Используя «пакетную обработку» API, мы теперь можем перенаправить файл из памяти blob в службу и получить желаемый результат. Тем не менее, время выполнения для небольших файлов (несколько КБ) значительно медленнее, чем на локальной машине, и, что более важно, процесс, кажется, никогда не возвращается для немного больших файлов входных данных (40 МБ). Время обработки на моей локальной машине для того же файла составляет менее 1 минуты.

Мой вопрос в том, что вы можете видеть все, что мы делаем неправильно, или если есть способ ускорить это. Вот представление DAG эксперимента:

The DAG representation of the experiment

ли это путь эксперимент должен быть установлен?

+0

Бросив этот вопрос внутренней команды, увидеть, если я могу получить хороший ответ для вас ... –

+0

Мы понимаем, конфиденциальность, связанную с вашим процессом ... но будет нужно немного больше информации, чтобы помочь ... Можем ли мы получить какую-то идею, что вы делаете? Предоставление базового базового кода с некоторым фактическим кодом и форматами файлов python будет необходимо, если у нас нет прямого доступа к вашей рабочей области ... Если вы готовы опубликовать свой идентификатор рабочей области, мы можем посмотреть некоторые внутренние журналы, которые помогут нас отлаживать ... –

+0

Благодарим вас за ответ. Я считаю, что это рабочее пространство ID: 6ad62803867e4060a11b0d32ba74e744 –

ответ

1

Похоже, что проблема заключалась в обработке отметки в таблице ввода. Успешное обходное решение заключалось в том, чтобы явно принудительно обработать столбец как строковые значения, используя блок «Редактор метаданных». Последняя модель теперь выглядит следующим образом:

final model

Смежные вопросы