Весенний пакетный удаленный раздел с несколькими таблицами

Question

Я разработал одно приложение, в котором мы должны обработать более 5 миллионов записей из одной большой таблицы. Мы использовали весеннее пакетное дистанционное разбиение, и оно отлично работает.

Теперь я должен использовать ту же работу и настроить ее для создания раздела для нескольких таблиц. Каждый раздел будет иметь имя таблицы и минимальные и максимальные записи, поэтому ведомый знает, из какой таблицы он должен читать данные и готовить файл.

Мой вопрос в том, что это может быть сделано, если да, то есть ли какой-либо образец там, на github.

Спасибо

Answer 1

Да, это можно сделать. Вам понадобится реализовать свой собственный Partitioner для обработки логики создания ExecutionContexts для каждого диапазона таблицы/строки.

Пару хороших ресурсов:

• Partitioner интерфейс документации: http://docs.spring.io/spring-batch/apidocs/org/springframework/batch/core/partition/support/Partitioner.html
• Раздел 7.4 Масштабирование и параллельной обработки главы Spring Batch по: http://docs.spring.io/spring-batch/trunk/reference/html/scalability.html
• Моя введение в Spring Batch видео охватывает разделов: https://www.youtube.com/watch?v=CYTj5YT7CZU и связанный с хранением данных Github: https://github.com/mminella/Spring-Batch-Talk-2.0