WedX - журнал о программировании и компьютерных науках

Планирование будущей версии файлов AWS S3

Я хотел бы поставить в очередь набор новых версий ресурсов веб-сайта и запустить их все почти одновременно.

У меня есть ряд связанных файлов и каталогов, которые должны быть запущены в будущем, все сразу. Другими словами, набор файлов AWS S3 в данной корзине необходимо обновлять почти одновременно. Некоторые из этих файлов имеют большой размер и могут быть получены из мест с ненадежным и медленным доступом в Интернет. Это означает, что их нужно где-то разместить, возможно, в другом ведре.

Я хочу иметь возможность вернуться к предыдущим версиям отдельных файлов или набора файлов.

Предложения или идеи? Код Bash предпочтительнее.

amazon-web-services amazon-s3
24.05.2019

Ответы:


1

Одним из вариантов может быть размещение Amazon CloudFront перед корзиной Amazon S3. Распространение CloudFront может быть «указано» на источник, например на корзину S3 и путь.

Таким образом, обновление можно было выполнить, просто изменив одну конфигурацию в раздаче CloudFront.

Если вы придерживаетесь исключительно S3, обновленные файлы необходимо будет скопировать в соответствующее место (либо из другого сегмента, либо из другого места в том же каталоге). Время, необходимое для этого, будет зависеть от размера объектов. Вы можете сделать параллельную копию, чтобы они копировались быстрее.

Или, если доступ к данным осуществляется через веб-страницу, у вас может быть уже установлена ​​новая версия файлов, а затем просто обновите веб-страницу, которая ссылается на файлы. Это означает, что все страницы (с разными именами) могут быть готовы к использованию, и вы просто обновляете домашнюю страницу, которая указывает на другие страницы. Думайте об этом, как о направлении людей через другую парадную дверь.

24.05.2019
  • Я уже использую CloudFront, поэтому я с ним знаком. Ваше решение CloudFront подойдет для сценария, в котором все файлы обновляются или все файлы копируются в новую корзину и старую корзину. Это большие файлы, поэтому затраты на хранение станут фактором. Второй вариант не будет мгновенным переключением. Третий вариант потребует сопоставления имен, поэтому веб-приложение должно знать об изменении сопоставления для обновления. Нужно подумать об этом. 24.05.2019
    • Новые материалы
    Как проанализировать работу вашего классификатора?
    Не всегда просто знать, какие показатели использовать С развитием глубокого обучения все больше и больше людей учатся обучать свой первый классификатор. Но как только вы закончите..
    Работа с цепями Маркова, часть 4 (Машинное обучение)
    Нелинейные цепи Маркова с агрегатором и их приложения (arXiv) Автор : Бар Лайт Аннотация: Изучаются свойства подкласса случайных процессов, называемых дискретными нелинейными цепями Маркова..
    Crazy Laravel Livewire упростил мне создание электронной коммерции (панель администратора и API) [Часть 3]
    Как вы сегодня, ребята? В этой части мы создадим CRUD для данных о продукте. Думаю, в этой части я не буду слишком много делиться теорией, но чаще буду делиться своим кодом. Потому что..
    Использование машинного обучения и Python для классификации 1000 сезонов новичков MLB Hitter
    Чему может научиться машина, глядя на сезоны новичков 1000 игроков MLB? Это то, что исследует это приложение. В этом процессе мы будем использовать неконтролируемое обучение, чтобы..
    Учебные заметки: создание моего первого пакета Node.js
    Это мои обучающие заметки, когда я научился создавать свой самый первый пакет Node.js, распространяемый через npm. Оглавление Глоссарий I. Новый пакет 1.1 советы по инициализации..
    Забудьте о Matplotlib: улучшите визуализацию данных с помощью умопомрачительных функций Seaborn!
    Примечание. Эта запись в блоге предполагает базовое знакомство с Python и концепциями анализа данных. Привет, энтузиасты данных! Добро пожаловать в мой блог, где я расскажу о невероятных..
    ИИ в аэрокосмической отрасли
    Каждый полет – это шаг вперед к великой мечте. Чтобы это происходило в их собственном темпе, необходима команда астронавтов для погони за космосом и команда технического обслуживания..
    Для любых предложений по сайту: [email protected]