У меня есть приложение ETL, которое предполагается перенести на инфраструктуру AWS. Планировщик, используемый в моем приложении, — это Tivoli Work Scheduler, и мы хотим использовать его и в облаке, где есть файловые зависимости.
Теперь, когда мы перейдем к aws, файлы для просмотра попадут в S3 Bucket. Можем ли мы поставить зависимость OPEN для файлов в S3? Если да, каким будет имя хоста (HOST#Filepath)?
Если нет, то какие службы должны быть согласованы для достижения этой цели. У меня есть как время, так и файловая зависимость в моих ГРАФИКАХ.
Например. Файл может быть загружен на S3 в час ночи. В 3 часа ночи мое расписание сработает, ищите файл в корзине S3. Если присутствует, начинает выполнение, а если нет, то он должен ждать в соответствии с другими параметрами на tws.
Любая помощь или совет будет приятно получить.
