Регистрация Войти
Рейтинг:0
Alex Kuchin avatar Server

Переход большого ковша на S3 Glacier

флаг es
Alex Kuchin

Я хочу переместить корзину размером 72 ТБ с S3 Standard на S3 Glacier.
Я собираюсь создать правило жизненного цикла и установить «Перенос текущих версий объектов между классами хранения» на 1 день.
Я предполагаю, что это произойдет не за один день, потому что я не уверен, что AWS справится с этой нагрузкой и сделает перенос 72 ТБ данных за один день.
Есть ли способ предсказать временную шкалу?

50
0 + 0
Nick avatar
флаг cn
Nick
Я не совсем уверен, сколько времени потребуется для передачи этих данных, но вы должны помнить о потенциальных затратах, связанных с запросами, особенно если эти 72 ТБ в основном представляют собой файлы меньшего размера: https://docs.aws.amazon.com/AmazonS3. /latest/userguide/lifecycle-transition-general-considerations.html
0
Ответить
Tim avatar
флаг gp
Tim
Почему это имеет значение? Расходы? Это произойдет довольно быстро, но неизвестно, как долго. Вы можете подумать, что 72 ТБ — это много данных, но S3 может содержать зетабайт данных, что делает 72 ТБ ошибкой округления. Учитывая, что ваши данные, вероятно, разбросаны по сотням или тысячам физических дисков, отправляясь во многие службы, которые, вероятно, имеют огромный кэш, который затем записывает данные на ленту (угадайте здесь), это не займет много времени.
0
Ответить
Alex Kuchin avatar
флаг es
Alex Kuchin
Спасибо за ваши Коментарии. Ранее мы перенесли еще одну корзину размером 11 ТБ с тем же правилом жизненного цикла, и AWS потребовалось около 3 дней для ее перехода. Так что для меня это имело значение, потому что я хотел быть готовым ответить на этот вопрос, если его задаст мое руководство - @Tim В любом случае, Тим, спасибо за разъяснение.
0
Ответить
Рейтинг:2
Alex Kuchin avatar Server
флаг es
Alex Kuchin

В данном случае это заняло 1 день (или даже меньше) к переходу.
Применено правило жизненного цикла к «Переносу текущих версий объектов между классами хранения» с S3 Standard на S3 Glacier и установлено 1 день.
Показатели ковша: размер — 73 ТБ; общее количество объектов - 6,5 млн..
Правило вступило в силу 6 октября в 9:30 утра.
Проверил ведро 7 октября в 7:00 - все объекты показали класс хранения "Ледник".

До того, как я другой случай:
То же правило жизненного цикла, упомянутое выше.
Показатели ковша: размер — 11 ТБ; общее количество объектов - 2,1 млн..
Переход занял около 3-х дней (точное время не засек).

Поэтому, основываясь только на размере ведра и количестве объектов, мы не можем предсказать.

0 + 0
флаг Moldova
Admin
Этот вопрос на других языках:

Ответить или комментировать

Большинство людей не понимают, что склонность к познанию нового открывает путь к обучению и улучшает межличностные связи. В исследованиях Элисон, например, хотя люди могли точно вспомнить, сколько вопросов было задано в их разговорах, они не чувствовали интуитивно связи между вопросами и симпатиями. В четырех исследованиях, в которых участники сами участвовали в разговорах или читали стенограммы чужих разговоров, люди, как правило, не осознавали, что задаваемый вопрос повлияет — или повлиял — на уровень дружбы между собеседниками.