2015-09-25 2 views
0

Я пытаюсь сделать инкрементную копию ок. 500 000 капель с одного учетного счета на другой.Скопируйте большое количество маленьких капель с AzCopy

Однако, кажется, что если я не укажу параметр/Pattern:, AzCopy просто висит навсегда, никогда не заканчивается. (Я фактически остановил процесс примерно через 15 минут).

Это полмиллиона (возможно, до 5 миллионов) капель слишком много для обработки AzCopy, или я чего-то не хватает здесь?

Команда Я использую выглядит следующим образом:

AzCopy /Source:<src>/documents /SourceKey:<srcKey> /Dest:<dest>/documents /DestKey:<deskKey> /S /XO /Y 

Добавление/шаблон параметр решает, но я хотел бы полную копию всех сгустков в контейнере.

Я должен добавить, что удалось скопировать все сгустки уже, то последующие пробеги потусклые, когда он должен «выяснить», которые сгустки были добавлены с момента последнего полного резервного копирования ..

+0

Я бы порекомендовал отслеживать запрос/ответ через что-то вроде Fiddler, чтобы вы знали, что делает AzCopy в этом сценарии, где вы думаете, что он висит. –

+0

Fiddler действительно не может показать сообщение, так как это https, но я вижу постоянное использование полосы пропускания от AzCopy в мониторе ресурсов, ок. Загрузка 200kB/s и загрузка 400kB/s для blob.am3prdstr01a.store.core.windows.net. Поэтому я предполагаю, что он выполняет сравнение капли в источнике и месте назначения.? – akrobet

+0

Вы можете расшифровать трафик HTTPS в Fiddler (http://www.enhanceie.com/fiddler/help/httpsdecryption.asp). Думаю, ваше подозрение верное. –

ответ

0

Какую версию AzCopy вы используете? Я предполагаю, что эта проблема исправлена ​​для многих выпусков ... Несколько версий назад, AzCopy необходимо перечислить все капли, которые будут загружены до начала передачи; в настоящее время AzCopy может делать листинг и передавать одновременно.

Для скачивания последней версии AzCopy и получения дополнительной информации см. http://aka.ms/azcopy.

+0

Версия 3.2. 0,93. Возможно, он делает перечисление и передачу одновременно, но он делает список капотов назначения по одному, как вы можете видеть в моем комментарии к исходному сообщению. – akrobet

+0

Это по дизайну. Если указан параметр/XO или/XN, AzCopy должен получать целевые капли по одному, чтобы получить их LastModifiedTime. –

Смежные вопросы