Я ищу программное обеспечение для копирования файлов с hostS на hostS.Поиск программы параллельной копии
Первый набор хостов (источники могут совместно использовать общую файловую систему), а второй набор (целевой) использует другую файловую систему.
Возможно, gridftp может это сделать, но я не могу найти пример n vs m.
Любая идея?
Возможно, это не то, что вы искали, но пища для размышлений: вы можете (ab) использовать протокол bittorrent. N исходных узлов будут выступать в роли семян, m узлы назначения будут действовать как одноранговые узлы. Довольно легко настроить (если у вас есть клиент командной строки), и он должен хорошо масштабироваться.
Не уверен, что протокол bittorrent знает, как обращаться с многократными клиентами, пишущими в одном файле ... – user1265046
Вы действительно думаете, что копирование файлов параллельно будет быстрее? – Mysticial
Вы имеете в виду, что пропускная способность сети не проблема? – user1265046
Никогда, я думаю, я неправильно понял ваш вопрос. У меня создалось впечатление, что это подразумевалось «параллельно», как в «нескольких ядрах», а не в сети. – Mysticial