provideo.ru - интернет-магазин профессионального видеооборудования и программного обеспечения

Гибкая миграция медиаархивов между различными платформами хранения

Гибкое и многоуровневое архивное хранение с P5 Data Mover

В этой статье мы рассмотрим процесс переноса архивных данных между разными типами хранилищ. Такая практика становится все более распространённой среди клиентов Archiware, поскольку помогает сократить стоимость хранения долгосрочных данных и обеспечить дополнительную надёжность. За миграцию данных между различными типами хранилищ в продуктовой линейке Archiware отвечает программный модуль P5 Data Mover, который легко интегрируется с MAM-системами.

По сравнению с долговременным хранением данных для IT, архивация медиаданных обладает собственной спецификой. Такие архивы должны существовать в течение многих десятилетий и они должны надежно сохранять свои активы, так как через несколько лет эти данные могут стать историческими артефактами. Медиаархив проще всего представить в качестве кладовой, полной старых катушек с кинопленкой. Как только в архив начинают поступать данные, необходимо планировать долгосрочное хранение этих данных. Обычно студии приобретают LTO-носители или приобретают облачное хранилище у провайдера. Однако со временем становится понятно, что данные в архиве обладают большей ценностью, чем носители, и, в некоторых случаях эти данные переносят, чтобы наилучшим образом сохранить данные на годы вперед.
Популярные причины для миграции медиаданных на другой тип хранилища:

• Устаревающие оборудование LTO, достигающие предела срока службы
• Плата за облачное хранение у провайдеров становится высокой, а другие провайдеры предлагают более привлекательные цены
• Слишком большое количество LTO-носителей
• Желание перейти от локального архива к облачному

Рассмотрим некоторые из них более подробно.
 

Миграция между LTO-носителями разных поколений

Каждые 2-3 года емкость LTO-носителя значительно увеличивается. В таблице ниже представлены 5 поколений LTO, выпущенных за последние 11 лет.

Выход накопителей формата LTO-10 планируется ближе к концу 2023 года с предполагаемой RAW-емкостью 27-36 ТБ. Столбец «Коэффициент» в таблице указывает емкость лент каждого поколения, которые можно разместить на одном носителе LTO-9. Производители картриджей LTO обычно заявляют, что ленты предназначены для архивного хранения в период от 15 до 30 лет.

Тут мы сталкиваемся с классическим компромиссом: оставлять данные на старых и, возможно, ненадежных LTO или модернизировать носители, что довольно затратно и трудоемко, но имеет свои преимущества как в надежности, так и в меньшей стоимости хранения за ТБ.
 

Миграция между различными провайдерами облачного хранилища

По сравнению с лентой LTO, на рынке облачного объектного хранилища высокая конкуренция и разное ценообразование, на которые могут влиять следующие факторы:

• За объем хранения ТБ
• Минимальный срок хранения
• Время ожидания до получения объекта
• Репликация данных между разными локациями
• Расчет по затратам на загрузку / загрузку для получения / вывода данных
• Стоимость вызовов API (добавление/удаление/список объектов)

Провайдеры с более простым ценообразованием могут взимать плату только за первые два пункта, а с более сложным — за все сразу. Исходя из этого довольно сложно предсказать, каковы будут финальные затраты. За все данные в архиве нужно платить снова и снова каждый месяц. Это может быть удивительно дорого с течением времени.
Миграция от одного облачного провайдера к другому более простая, чем с миграцию между различными поколениями LTO-носителей, поскольку нет необходимости покупать и настраивать оборудование. Однако программный инструмент, используемый для миграции с одной площадки облачного хранения на другую, должен поддерживать ​​массовую миграцию данных, обеспечивая при этом постоянный доступ к архивному медииактиву.
 

Гибридная миграция (многоуровневая)

Здесь все становится интереснее. Если мы взвесим плюсы и минусы хранилища LTO и облачного хранилища, мы можем прийти к выводу, что лучшим решением станет комбинация обоих способов хранения. Возможно, мы хотели бы использовать локальное оборудование LTO для нашей начальной фазы архивирования, чтобы иметь быстрый доступ к недавно сохраненным медиафайлам, но через 1 год перенести эти архивные данные в облачное хранилище, когда эти медиафайлы будут менее востребованы.

Такой гибридный подход потребует отлаженного рабочего процесса, при котором файлы архивируются один раз, а программная платформа архивации позаботится о перемещении данных в облачное хранилище по прошествии определённого периода (например 1 года). Преимущество этого подхода в том, что LTO-носители прошлых поколений не будут копиться сотнями, а данные на этих LTO будут храниться только 1 год. Таким образом, можно избежать сложностей и упростить переход на LTO-носители нового поколения.
 

Заключение

При такой сложной инфраструктуре архивного хранения важно иметь гибкость, чтобы можно было задействовать широкий спектр вариантов хранения при максимальной выгоде. Технологии и цены, несомненно, изменятся в будущем. Возможно, в будущем некоторые типы хранения станут дороже, а другие доступнее. Адаптировать свою инфраструктуру хранения дорогого стоит. Тем, кто работает в экосистеме P5 Archive, рекомендуем обратить внимание на модуль P5 Data Mover, который облегчает миграцию данных на разные типы хранилищ.
 

Попробуйте Archiware P5 прямо сейчас с бесплатной 30-дневной версией!