як додати керування кешем в AWS S3?

Я перемістив 20000 файлів у AWS S3 за допомогою команди s3cmd. Тепер я хочу додати кеш-контроль для всіх зображень (.jpg)

Ці файли знаходяться в (s3: // bucket-name / images /). Як я можу додати кеш-контроль для всіх зображень за допомогою s3cmd або є інший спосіб додати заголовок?

Дякую

Будь ласка, спробуйте поточну головну гілку ( https://github.com/s3tools/s3cmd ), оскільки тепер у неї є modifyкоманда, яка використовується наступним чином:

./s3cmd --recursive modify --add-header="Cache-Control:max-age=86400" s3://yourbucket/

Також із власним клієнтом AWS:

aws s3 sync /path s3://yourbucket/ --recursive --cache-control max-age=604800

У моєму сегменті є файли mp4, jpg та інші. Файли, які я хотів оновити, зберігаються у "підгрупі" (наприклад: https://s3.amazonaws.com/my.bucket/sub-directory/my-video.mp4 ). У моєму випадку я хотів лише оновити кеш-контроль у файлах mp4:

aws s3 cp \
   s3://my.bucket/sub-directory/ s3://my.bucket/sub-directory/ \
   --exclude '*.jpg' --exclude '*.png' \
   --cache-control 'max-age=31104000' \
   --recursive

Щоб перевірити, що це буде робити, ви можете використовувати --dryrunпрапор:

aws s3 cp --dryrun \
   s3://my.bucket/sub-directory/ s3://my.bucket/sub-directory/ \
   --exclude '*.jpg' --exclude '*.png' \
   --cache-control 'max-age=31104000' \
   --recursive

Щоб відрегулювати такі метадані, як кешування кешу на об’єкті в S3, не перезавантажуючи їх і не використовуючи сторонні інструменти, ви можете зробити наступне за допомогою AWS CLI. Він копіює об'єкт у себе, перекриваючи метадані за вибраними налаштуваннями:

aws s3api copy-object --copy-source <bucket-name>/<file> --bucket <bucket-name> --key <file> --metadata-directive REPLACE --cache-control "max-age=3600"

Опрацюйте цю команду у пошуку, щоб зробити це на існуючому наборі файлів, який уже існує у сегменті, як ви вже згадуєте:

find . -type f -exec aws s3api copy-object --copy-source <bucket-name>/{} --bucket <bucket-name> --key {} --metadata-directive REPLACE --cache-control "max-age=3600"

замінити <bucket-name>на ім'я вашого відра

ПОПЕРЕДЖЕННЯ: це перезапише всі ваші існуючі метадані у файлах, таких як acl, просто додайте додаткові прапорці до команди, щоб встановити те, що вам потрібно, наприклад, --acl public-readнадати повний загальнодоступний доступ. (спасибі @jackson)

Якщо ви хочете уникати сторонніх інструментів, і це одноразове завдання, ви можете скористатися консоллю AWS.

1. Перейдіть до свого відра s3
2. Виберіть усі об’єкти, які потрібно змінити
3. Клацніть Дії -> Змінити метадані
4. Виберіть Кеш-контроль для клавіші, введіть будь-який елемент управління, який ви хочете, як значення
5. Зберегти

PUT / ObjectName HTTP/1.1 
Host: BucketName .s3.amazonaws.com 
Date: date 
x-amz-meta-Cache-Control : max-age= <value in seconds> 
Authorization: signatureValue 

Кожне налаштування метаданих містить пару ключ-значення. Клавіша управління метаданими кеш-пам'яті - "Керування кешем", а значення -“max-age=<time for which you want your object to be accessed from cache in seconds>”

Ви можете встановити спеціальний заголовок управління кешем для об’єктів Amazon S3, надіславши запит HTTP PUT на сервер Amazon S3 із відповідними заголовками двома способами:

Встановіть метадані кешування кеш-пам’яті, використовуючи Amazon S3 REST API PUT Object Request - Якщо ви програміст, ви можете написати власну програму для використання Amazon S3 REST або SOAP API для встановлення користувацьких заголовків із запитом об’єкта PUT. Цей веб-сайт стосується лише API REST для Amazon S3. Будь ласка, зверніться до веб-сайту документації AWS, щоб отримати докладні відомості про те, як користуватися API SOAP. Встановіть метадані кешування кешування за допомогою інтерфейсу користувача Bucket Explorer - якщо ви хочете встановлювати власні заголовки HTTP, такі як кеш керування, за допомогою клацань миші замість написання програмного забезпечення, ви можете використовувати для цього інтерфейс користувача Bucket Explorer. За допомогою цього користувацького заголовка HTTP ви можете вказати поведінку кешування, якої слід дотримуватися в ланцюжку запитів / відповідей, а також запобігти втручанню кеш-пам’яті у запит чи відповідь.

для отримання додаткової інформації, будь ласка, перевірте Як встановити заголовок керування кешем для об’єкта Amazon S3? `

(Оскільки ОП просив про інший шлях)

Ви також можете зробити це aws-cli, наприклад, (v:) aws-cli/1.8.8 Python/2.7.2 Darwin/12.5.0:

aws s3api put-object \
--bucket mybucket \
--key my/key \
--cache-control max-age=1 \
--body myfile.txt

Хоча зауважте, що ви перепишете будь-який існуючий об’єкт.

Просто оновіть s3cmd до версії 1.5.1, і проблема вирішиться.

Ще один простий спосіб зробити це - використовувати браузер S3: http://s3browser.com/ Ви можете просто натиснути клавішу Shift або Ctrl + A, щоб вибрати всі потрібні зображення; потім просто перейдіть на вкладку "Http заголовки" і натисніть - "Додати новий заголовок", а потім "Застосувати зміни". Він автоматично зберігав усі мої інші дозволи та заголовки.

Якщо ви багато використовуєте S3; це солодкий додаток у будь-якому випадку, особливо якщо у вас є величезні завантаження (немає нічого кращого у світі ftp, dropbox чи іншим чином!)