Рекомендовать лучшую кластерную структуру для использования в Java

Question

Мне нужно разделить некоторые задания между разными машинами в сети. Есть ли подходящая инфраструктура в Java для использования.

Подробнее: у вас есть приложение, получающее некоторые входные данные. В результате, если анализ, который вы кодируете, решает сделать некоторые операции, но на основе некоторой логики, он не может позволить себе выполнять все необходимые операции из-за нехватки вычислительных ресурсов. Таким образом, он должен распределять остальные части задачи среди других машин. Итак, есть ли какая-либо структура, которая позволяет мне сделать такое распределение? (Я полагаю, он должен обеспечить некоторые функции при регистрации машин, создание задач, сбор результатов ...)

Спасибо!

Answer 1

Вы пробовали java JGroups, чтобы создать узлы регистра каналов и перенести данные на несколько узлов. , но вы должны написать свой собственный код, чтобы разделить задачу и заполнить ее.

Answer 2

Apache Hadoop является одним из таких рамок, разработанных Apache.

Answer 3

Я предлагаю перейти на Hazelcast кластерная структура с открытым исходным кодом, разработанная в чистой java.

См. ExecutorService раздел.

ExecutorService in hazel cast позволяет распределить выполнение задач.