Я пытаюсь переместить некоторые файлы журналов, расположенные на внешнем веб-сервере, в корзину Amazon S3. Это должно происходить каждые 7 дней без ручной активации. Кроме того, я бы хотел, чтобы он был «отказоустойчивым», поэтому, вероятно, было бы лучше, если бы операция копирования выполнялась в облаке Amazon. Я уже читал что-то о решении AWS Data Pipelining, но не смог найти ничего о том, как заставить его работать с внешним (то есть не размещенным на Amazon) источником данных, не говоря уже о загрузке файла с веб-сервера и последующей обработке. Это. Есть ли у кого-нибудь опыт с подобной проблемой и какие-либо советы для меня, с чего начать?
Благодарю вас!