Вопросы по управлению транзакциями

Цель пакетной обработки - разбить то, что вы пытаетесь сделать, на небольшие единицы работы, которые можно обрабатывать индивидуально (последовательно или параллельно). Пакетная обработка Spring - это платформа, которая предоставляет вам гибкий механизм, построенный на основе Spring, который позволяет выполнять пакетную обработку стиля. В зависимости от ваших требований вы можете настроить пакет Spring для выполнения разными способами. Упомянутая вами обработка, ориентированная на фрагменты, - это всего лишь один из способов использования пакета Spring.

Если я посмотрю на предоставленную вами информацию, то вот элементы вашего приложения, как я их вижу:

• читать записи из базы данных, которые необходимо обработать
• обрабатывать записи, что приводит к обновлению db # 2
• отмечать записи как обработанные
• записать запись в обработанный файл

Вы заметите, что я немного изменил порядок событий. Описанная мной логика хорошо подходит для пакетной обработки. Вот пример того, как вы можете управлять этой обработкой с помощью пакета Spring:

1. Получить записи из базы данных для обработки. Извлечение будет выполняться с помощью специальной программы извлечения из базы данных. Эти записи будут использоваться Spring Batch в качестве селектора записей. Затем вы должны настроить пакет Spring для перебора этого списка.
2. Вы должны сконфигурировать следующий шаг пакета Spring для обработки каждой из записей, полученных на шаге 1. Эта обработка будет состоять из обработки отдельной записи и записи результатов во вторую базу данных.
3. Ваш последний шаг - завершить обработку отдельной записи. Как и в большинстве фреймворков Spring, существует множество различных способов настройки, когда это происходит. Этот последний шаг будет выполнять две функции: обновлять запись в базе данных №1 как обработанную и записывать обработанную запись в выходной файл. Запись выходного файла может быть выполнена как шаг 4 по завершении общего пакетного процесса, где вы должны просмотреть записи, отмеченные как обработанные во время текущего прогона, и записать данные по мере необходимости.

Пакет Spring позволяет настроить управление транзакциями на протяжении всей его обработки, поэтому вы можете настроить транзакцию, которая проходит через все действия, и в случае сбоя записи файла ее можно настроить для отката остальных операций с базой данных.

При таком подходе вы можете обрабатывать записи последовательно, параллельно и т. Д. Однако все это предполагает, что вы можете разбить данные на более мелкие единицы работы. Если это не так, то пакетная обработка на самом деле не может быть выполнена, поскольку у вас есть только один процесс.

Я хотел бы сказать, что есть простой ответ, чтобы решить, использовать ли пакет Spring или нет. Это платформа, которая позволяет делать множество вещей. Наряду с такой гибкостью у него относительно высокая кривая обучения.

Надеюсь это поможет.

Я бы сказал, что Spring способ сделать это - реализовать версию PlatformTransactionManager абстракция Spring, которая задерживает запись в файл до тех пор, пока транзакция не будет зафиксирована. Не должно быть слишком сложно.