AWS S3 sync - удалять новые файлы локально

Question

aws s3 sync --delete удалены некоторые новые файлы.

Например:

Существует файл в ведре - S3://my-bucket/images/1.jpg

Затем я загрузил файл на сервер: 2.jpg

Есть 2 файлов на сервере: 1.jpg и 2.jpg

Начало работы синхронизации cronjob:

aws s3 sync s3://my-bucket/ ./ --delete 
aws s3 sync ./ s3://my-bucket/ --delete 

---

Почему мы добавляем --delete - мы хотим удалить файлы в s3 и синхронизировать их с сервером.

Мы загрузим файлы на сервер и удалим файлы в s3.

Есть ли способ исправить это?

Answer 1

По умолчанию команда aws sync не удаляет файлы. Он просто копирует новые или измененные файлы в пункт назначения.

Использование опции --delete удаляет файлы, существующие в пункте назначения, но не в источнике.

Таким образом, если источник содержит: 1.jpg и 2.jpg и назначения содержит 1.jpg, 2.jpg и 3.jpg, затем с помощью --delete опции будут удалены 3.jpg от пункта назначения.

Я вижу, что вы используете команду sync в обоих направлениях. Ваша первая команда (которая синхронизирует S3 с локальным каталогом) удалит любые локальные файлы, которые не находятся в S3.

Если ваша цель состоит в том, чтобы скопировать все локальные файлы в S3 и все файлы S3 в локальный каталог, без удаления каких-либо файлов, то не используйте --delete опцию.