Как обеспечивать эффективное хранение и восстановление данных и не тратить на это миллионы

Алексей Зотов. Важность резервного копирования, как правило, никем не оспаривается. Мы все стараемся каким-либо способом защитить свои данные. Однако некоторые заказчики искренне заблуждаются, полагая, что у них построено отказоустойчивое решение. Они уверены, что, если система распределена между несколькими площадками или настроена какая-либо синхронная реплика, данные уже защищены и резервное копирование не требуется.

При этом нельзя исключать человеческий фактор или влияние вредоносного ПО. В последний год в связи с переходом на удаленку тенденции меняются. Часто сотрудники, работая из дома, отвлекаются и случайно нажимают какую-либо клавишу, что может разблокировать консоль и запустить какую-либо ненужную команду. Кроме того, с переходом сотрудников на удаленку компании открывают внешний доступ, что создает потенциальные уязвимости, а также может предоставить доступ для злоумышленников и различных вирусов-шифровальщиков.

У наших заказчиков бывают случаи потери данных в результате ошибки оператора или проникновения в инфраструктуру шифровальщика. В таких случаях именно восстановление из резервных копий помогает заказчикам восстановить свои продуктивные системы и вернуться к нормальной работе.

С конца 2020 г. мы предлагаем резервное копирование в Облаке КРОК на базе ПО Veritas NetBackup.

Алексей Казем. Мы используем Veritas NetBackup уже много лет. Преимущество этого ПО заключается в обширной поддержке платформ. NetBackup поддерживает практически все самые распространенные операционные системы, классические СУБД, виртуальные среды, включая не только Hyper-V, но и Nutanix, RHV, OpenStack и Docker. Кроме того, мы выпустили агентов под Hadoop, MongoDB, PostgreSQL и т. д.

Решение NetBackup представлено во всех вариантах развертывания и его можно установить на любом оборудовании — сервере, операционной системе, физическом или виртуальном устройстве, контейнеризированном устройстве или в облаке. Кроме того, мы предоставляем возможность эффективно хранить данные в различных системах хранения, начиная с классических лент, дисковых устройств различных вендоров, наших устройств, заканчивая облаком.

NetBackup — универсальное решение для защиты и хранения данных

На сегодняшний день мы поддерживаем большое количество различных нагрузок и комбинаций источников в качестве платформ, на которые можно установить NetBackup, и в качестве резервируемых источников и целевых устройств для хранения резервных копий.

NetBackup Veritas отлично интегрируется с Облаком КРОК. Совершенно не имеет значения, что именно заказчик хочет разместить в облаке и какие нагрузки ему необходимо резервировать, NetBackup, может осуществлять резервное копирование через агента или без него и хранить данные в объектных хранилищах.

В новых версиях NetBackup 8.3 и 9.0, выпущенных за последний год, мы сосредоточились на 4 темах:

• Улучшение поддержки различных нагрузок:

— Базы данных (MS SQL, Oracle RAC, DB2).

— Виртуализация (Nutanix).

— MongoDB (поддержка новой версии).

— Universal Shares (резервное копирование любых данных на сетевом диске с дедупликацией).

• Аварийное восстановление и работа с облаком.

— Работа с объектными хранилищами с программной дедупликацией NetBackup (не все вендоры могут предложить эффективное хранение в облаке и отправку данных в облако).

— Интеграция с VRP (NetBackup предлагает репликацию живых виртуальных машин, обеспечивая улучшенную точку и время восстановления (RPO/RTO), что актуально, учитывая слияние рынков резервного копирования и репликации).

— Поддержка OpenStack. NetBackup 9.0 поддерживает безагентское резервное копирование экземпляров OpenStack без прокси.

— Dynamic NAT (при резервном копировании за NAT).

• Упрощение управления (расширенные возможности Web UI, REST API и т. д., направленные на упрощение и автоматизацию работы с NetBackup).

• Надежность защиты, учитывая рост количества кибератак во время пандемии в связи с массовым переходом в облако.

— Ransomware Immutability (защита резервных копий, которые являются неизменяемыми (т. е. их нельзя удалить или испортить во время хранения)).

— Поддержка Single Sign-on в WebUI.

— Поддержка 2048-битных сертификатов.

Nutanix

Поддержка Nutanix позволяет сократить требования к объемам хранения и окну резервного копирования с помощью поддержки инкрементных резервных копий и защиты на уровне полного резервного копирования с помощью синтетики.

SQL Server

Поддержка Microsoft SQL Server упрощает управление критически важными экземплярами SQL, поскольку позволяет SQL-админу безопасно делегировать полномочия и обеспечивает мгновенное восстановление (новый уровень RTO/RPO).

Oracle RAC

Автоматическое обнаружение и каталогизация экземпляров Oracle RAC с балансировкой нагрузки при резервном копировании, т. е. поддержка экземпляра RAC через WebUI. Благодаря скриптам Just-In-Time RMAN больше не приходится писать скрипты вручную.

IBM DB2

Сократились затраты на хранение благодаря интеллектуальному управлению хранением данных DB2. Администраторы баз данных получили возможность быстро определять данные, которые необходимо восстанавливать, с помощью новых инструментов управления журналами транзакций и восстановления.

• WebUI дает представление о различных вариантах экземпляра (Instances), группах доступности (Availability groups), базах данных (Databases) и обеспечивает мгновенный доступ к базам данных (Instant access databases). Мы можем раскрыть любую базу данных, для которой создана резервная копия, проверить время создания последней резервной копии (Last database backup) и журнала (Last transaction log backup).

Поддержка Microsoft SQL

• Даты резервных копий можно также уточнить в календаре и, нажав на нужную резервную копию, запустить восстановление.

Выбор даты резервной копии базы данных для восстановления

• Для восстановления доступа используется простой мастер восстановления (Wizard). Для восстановления можно выбрать другой узел сети, другой экземпляр, указать другой путь для сохранения MDF и LDF-файлов и выбрать учетную запись, из-под которой выполняется восстановление.

Configure instant access

• Базы данных, сохраненные на диске, могут быть мгновенно восстановлены.

— Запускаем Мастер (Wizard), выбираем узел сети и экземпляр и указываем учетные данные, из-под которых будет выполнено восстановление.

Настройка параметров мгновенного доступа

— Выбираем дополнительные параметры и проверяем образ, который необходимо мгновенно восстановить.
 

— Запускаем мгновенное восстановление. 

На этом этапе по очереди выполняются две задачи:

• создается точка монтирования CIFS и экспортируется на указанный узел связи (MS SQL);

• экспортированная база данных присоединяется к выбранному экземпляру.

— Когда восстановление и присоединение базы завершено, ее статус меняется с In progress на Attached.

Присоединение восстановленной базы данных

• После этого можно открывать Microsoft SQL Management Studio и обновить список баз.

Добавление восстановленной базы данных в список доступных баз

Если база, восстановленная из хранилища резервных копий в режиме мгновенного доступа, появилась в списке, можно продолжать с ней работать, как с обычной базой. Дата создания базы говорит о том, что база была экспортирована с нашего Media Server с дисковой дедупликацией.

Эта же технология применяется для того, чтобы для любых нагрузок «расшарить» наш Deduplication pool на Media Server. Можно выбрать протоколы NFS или CIFS, настроить квоты и указать узлы связи для экспорта.

8.3 MSDP Cloud

Мы улучшили возможности резервного копирования в объектные хранилища с дедупликацией. Для работы с объектными хранилищами раньше нам приходилось ставить отдельный прокси — CloudCatalyst. Начиная с версии 8.3 к обычному Media Server с локальным дисковым хранилищем c дедупликацией можно подключить любое количество бакетов (buckets) для сохранения данных и хранения вторичных копий. Мы предоставляем для хранения данных и сохранения вторичных копий участки памяти суммарной емкостью до 1 петабайта, а также локальное блочное хранилище до 250 ТБ под одним Media Server.

Оптимальное хранение в облаке MSDP Cloud

Кроме того, в NetBackup Platform CE сейчас встроена репликация виртуальных машин (VRP), чтобы улучшить точку и время восстановления (RPO/RTO).

Репликация ВМ встроена в NetBackup Platform CE

Резервное копирование можно выполнять достаточно часто, например, каждый час или даже каждые 30 минут (если RPO меньше 30 минут). Репликация обеспечивает хорошие значения RPO/RTO, потому что виртуальная машина запускается с реплики без необходимости восстановления. Эта возможность предоставляется в рамках лицензии NetBackup CE и частично интегрирована в веб-консоль, что позволяет отслеживать обеспечиваемые репликацией SLA, состояние виртуальных машин и т. д. в одном окне.

Улучшения для резервного копирования OpenStack

NetBackup предлагал неплохие возможности для резервного копирования OpenStack и в предыдущих версиях, например, резервное копирование экземпляров без установки прокси. Мы могли использовать одного специализированного пользователя (tenant) с прокси, который «натягивал» на себя экземпляры других пользователей.

В NetBackup 9.0 мы перешли на другую архитектуру работы с OpenStack. NetBackup 9.0 работает без прокси и использует Data Movers на узлах гипервизора и может копировать экземпляры в режиме Self-Service. Кроме того, можно делать инкрементальные резервные копии и резервное копирование различных баз данных с функцией Application Consistency, восстанавливать базы как целиком, так по файлам с помощью Single File Recovery и т. д.

Улучшения для резервного копирования OpenStack

Эти многочисленные возможности представлены в версии NetBackup 9.0.0.1, выпущенной в апреле 2021 года.

Улучшения в NetBackup WebUI

• Самообслуживание для владельцев нагрузок — RHV Admin было доступно и в предыдущих версиях. В NetBackup 8.3 мы добавили возможность самообслуживания для MSSQL Admin.

• Мы добавили новые возможности для администраторов:

Security management, Activity Monitor, FETB capacity management, policy management (Standard, MS Windows, Oracle, MSSQL.

• В NetBackup 9.0 добавлены возможности для NDMP.

• Другие улучшения:

Backup Now, manage Resource Limits, enhanced RBAC, Oracle RAC, Section Size, Getting started wizard.

• В NetBackup 9.0 добавлены готовые шаблоны ролей (Roles Templates), с которыми можно работать уже в режиме контроля доступа пользователей.

Интерфейс NetBackup 9.0 немного изменился по сравнению с предыдущей версией.

На начальном экране NetBackup 9.0 запускаются мастера (Wizard).

Начальный экран Veritas NetBackup

В настоящее время из WebUI можно добавить и настроить практически любое дисковое хранилище, обнаружить нагрузки, создать регулярные планы защиты и настроить резервное копирование, т. е. подписать нужные нагрузки на эти планы.

Добавление дискового хранилища

При добавлении дискового хранилища через WebUI доступны все основные и продвинутые варианты дискового хранения:

• AdvancedDisk

• Cloud storage

• Media Server Deduplication Pool (MSDP) — наша программная дедупликация на любом СХД.

• OpenStorage — интеграция с системами хранения, такими как Data Domain и StoreOnce.

В WebUI можно отслеживать состояние серверов для хранения (Storage servers), дисковых пулов (Disk pools), единиц хранения (Storage units) и универсальных каталогов (Universal shares).

Возможности отслеживания из WebUI

В WebUI также можно работать с политиками, хотя пока доступно ограниченное количество политик.

Работа с политиками из WebUI

На сегодняшний день из WebUI доступно пять политик: MS Windows, Standard, MS SQL Server, NDMP и Oracle.

Политики, доступные из WebUI в NetBackup 9.0

Мы предлагаем новые возможности, улучшающие надежность и безопасность резервного копирования.

• Интеграция с внешним сервером управления ключами шифрования.
• Гранулярный контроль доступа пользователей на основе ролей был доступен уже в версии 8.1.2, но в NetBackup 9.0 мы добавили готовые шаблоны ролей. На сайте поддержки доступен и Perl-скрипт для NetBackup 8.3, который запускается и создает шаблоны ролей без необходимости обновления до версии 9.0.
• Сертификаты NetBackup CA 2048 бит+.
• Single Sign-On на базе SAML.
• Улучшенная защита от шифровальщиков и злонамеренных копий благодаря неизменяемым (immutable) копиям, которые невозможно удалить в течение гарантированного срока хранения.
• Установка агентов без компонентов Java.
• Экспорт NetBackup Audit Log в Syslog.
• Поддержка Windows BMR GPT.
• Срок хранения после 2038.

В Облаке КРОК доступны стандартные варианты лицензирования NetBackup.

• Предоплата.

• Постоянная лицензия +23% в год за постоянную поддержку.

• Подписка (по предоплате).

• Оплата по факту использования (ежемесячно) — позволяет в любой момент сохранить объем резервируемых данных.

 Лицензирование в Облаке КРОК

Алексей Зотов. По результатам нашего опроса большинство участников размещают системы резервного копирования у себя и администрируют их самостоятельно. Половина участников опроса использует продукты Veritas и оставшиеся — VM Commvault и другие продукты. Можно сделать вывод, что NetBackup может предложить интересные функции, которые отсутствуют у конкурентов.

В Облаке КРОК мы предлагаем разные варианты инфраструктуры резервного копирования.

Классическая инфраструктура резервного копирования.

Классическая инфраструктура резервного копирования в Облаке КРОК с использованием NetBackup предусматривает использование сервера резервного копирования и агентов.

Особое внимание хотелось бы обратить на то, как мы организовали хранение. В качестве хранилища резервных копий мы решили использовать наше объектное S3-хранилище, совместимое с Amazon. Мы выбрали его, потому что:

1. Наше хранилище располагается на независимом от облака оборудовании.
2. Оборудование располагается в трех территориально распределенных ЦОДах, и все данные хранятся одновременно во всех трех ЦОДах. Это означает, что даже в случае потери двух площадок из трех, мы сохраним копии.
3. Кроме того, NetBackup поддерживает интеграцию встроенной дедупликации с облачными S3-хранилищами. Соответственно, все данные в облаке хранятся в S3-хранилище в дедуплицированном виде. Согласно результатам нашего тестирования на смешанных нагрузках, мы обеспечиваем сжатие до 20-25 раз. При этом тестирование проводилось для нагрузок, которые исторически не очень хорошо дедуплицируются, включая базы данных SQL, Oracle, SAP HANA. S3 обеспечивает надежное и достаточно недорогое хранение резервных копий.

Варианты архитектуры резервного копирования

Некоторые заказчики пользуются собственной (on-premise) инфраструктурой в своем ЦОДе. В таком случае:

• Если у заказчика нет системы резервного копирования, например, на новой или временной площадке, мы можем предложить резервное копирование на сервер NetBackup в облаке. Заказчику необходимо установить агенты, создать сервисные учетные записи или учетные записи для ПО, поддерживающего безагентское резервное копирование, организовать канал до NetBackup — выделенный канал или поддержку за NAT, после чего можно передавать данные на хранение в S3.
• Если у заказчика уже есть собственная система резервного копирования в своем ЦОДе, но ему необходимы отчуждаемые копии, можно использовать несколько вариантов. Классический вариант — использование лент, но недостатки использования лент хорошо известны. Поэтому мы предлагаем возможность использовать наше S3-хранилище.

Мы тестировали наше S3-хранилище со всеми популярными решениями, которые используют заказчики. Наше S3-хранилище поддерживает все решения основных вендоров. Кроме того, тестирование проводилось с дисковыми устройствами хранения и дедупликации, включая Data Domain и StoreOnce, и результаты тестирования подтвердили, что наша инфраструктура отлично работает.

Таким образом, мы предлагаем заказчикам следующие управляемые сервисы:

• Полный аутсорсинг всех процессов.
• Подключение любого дополнительного оборудования.
• Надежная резервная площадка.
• Гарантированное восстановление информации.
• Возможность создания резервной площадки в Облаке КРОК.
• Широкий выбор ПО резервного копирования.

Основное преимущество NetBackup и продуктов Veritas в нашем облаке — это возможность самостоятельно выбирать продукты Veritas, используемые в Облаке КРОК, и определять длительность услуг (например, пользоваться услугами по подписке или оплачивать услуги по мере потребления).

Оплата услуг по мере потребления особенно выгодна компаниям, которые стремятся сократить затраты на резервное копирование. Например, если в высокий сезон растет количество виртуальных машин и, соответственно, возвращаемых данных, стоимость услуг резервного копирования также растет. Но, если объемы защищаемых данных сокращаются, стоимость услуг падает. Такое решение предлагает ощутимые преимущества в сравнении с решением on-premise с лицензией на использование, потому что лицензия приобретается, как правило, с запасом, чтобы обеспечить возможный рост и работу ПО резервного копирования в будущем.

Мы запустили поддержку NetBackup во второй половине 2020 года, и решение уже вызывает интерес у наших заказчиков. На существующих примерах использования можно оценить подходящие варианты архитектуры, предлагаемые в облаке.

Резервное копирование информационных ресурсов FMCG-холдинга (производство товаров широкого потребления) — классический облачный заказчик с большим количеством виртуальных машин.

Проблема. Холдинг работает с большим количеством точек и большим количеством брендов, у каждого из которых есть свой веб-ресурс. Все данные являются критичными, поэтому возникла потребность в защите — в резервном копировании этих виртуальных машин и ресурсов на этих виртуальных машинах.

• Риск перебоев в работе информационных сайтов.

• Трудности управления и мониторинга инфраструктуры.

Решение. Мы предложили заказчику NetBackup. Учитывая большое число клиентов, мы подготовили дистрибутив агента резервного копирования и файл ответов для установщика и передали их нашим администраторам, которые помогают заказчикам сопровождать виртуальные машины. Администраторы установили агента через Ansible и настроили виртуальные машины буквально за полтора дня. После этого мы запустили тестовое резервное копирование для некоторых машин и включили расписание и политики для абсолютно всех машин. Нам пришлось исправить несколько небольших ошибок, после чего мы начали резервное копирование.

• Размещение 26 сайтов в Облаке КРОК.

• Резервное копирование данных и мониторинг доступности в формате управляемого сервиса.

Результат. Система работает бесперебойно. Кроме того, мы включили синтетическое резервное копирование для всех виртуальных машин, поэтому резервное копирование всех систем занимает 30-60 минут.

• Гарантия стабильного взаимодействия с покупателями.

• Сокращение затрат на инфраструктуру.

• Упрощение администрирования.
  
  

Резервное копирование гибридной инфраструктуры ритейлера

Проблема. Первоначально заказчик арендовал выделенную инфраструктуру в ЦОД. Ему требовалась защита всей классической нагрузки: контроллер домена, виртуальной инфраструктуры, почтовых систем, различных баз данных и т. д. Кроме того, переменная часть инфраструктуры располагалась в облаке. Обмен данных организован по выделенному каналу. В высокий сезон объем данных возрастает и в низкий сезон уменьшается.

Эту гибридную инфраструктуру нужно было защищать, обеспечивая резервное копирование.

• Риски потери информации в случае сбоев.

• Высокие затраты на резервное копирование.

Решение. Мы поставили в ЦОД дополнительный сервер резервного копирования со встроенными дисками, установили на него NetBackup, настроили политики резервного копирования и облачной части, и HaaS-части. Кроме того, отчуждаемые копии отправляются в наше S3-хранилище на случай сбоя сервера или дисковой подсистемы.

• Размещение e-com-инфраструктуры в ЦОД и Облаке КРОК.

• Резервное копирование на диски с глобальной дедупликацией.

Результат. Заказчик получил все классические преимущества NetBackup: синтетическое резервное копирование, мгновенное восстановление виртуальных машин, гранулярное восстановление данных, возможность восстановления отдельных писем и т. д.

Кроме того, мы как поставщик услуг получили дополнительный бонус — NetBackup работает стабильно и практически без ошибок. Заказчикам не приходится обращаться к нам в связи со сбоями или ошибками в самом ПО. 

• Распределенное хранение каждой копии на трех площадках.

• Дедупликация, благодаря которой объем хранимых данных уменьшается в несколько раз.
  
  

Резервное копирование по подписке для фармкомпании

Проблема. Заказчик использовал on-premise-оборудование, установленное в его ЦОДе и виртуальные машины, арендуемые в Облаке КРОК. Между ЦОДом и Облаком КРОК был создан выделенный канал.

Заказчику требовалось резервное копирование виртуальных машин в облаке и одновременно резервное копирование данных в ЦОДе. В ЦОДе использовались разрозненные системы резервного копирования, техническая поддержка не всегда продлевалась вовремя, отсутствовал выделенный сотрудник, ответственный за резервное копирование данных. В результате затраты на резервное копирование увеличивались, также возрастал риск потери данных и невозможности восстановления.

• Устаревшая платформа резервного копирования.

• Высокая стоимость резервного копирования.

Решение. Мы предложили резервное копирование на облачном сервере как для виртуальных машин в облаке, так и для данных в ЦОДе по выделенному каналу. Мы взяли на себя администрирование и включили синтетическое резервное копирование, чтобы ускорить резервное копирование.

• Переход на NetBackup в Облаке КРОК.

• Активация функции синтетических резервных копий.

Результат. Заказчик использует очень много SQL-баз данных. Поэтому мы предоставили ему возможность подключаться через веб-консоль и самостоятельно восстанавливать эти базы данных без установки локального толстого клиента. Соответственно, данные можно восстанавливать на выбранный сервер, переименовывать базы данных, использовать мгновенный запуск и т. д. исключительно из веб-консоли.

• Легкая миграция за один день.

• Сокращение затрат на резервное копирование на 30%.

• Удобное управление восстановлением через консоль.

• Уникальная услуга резервного копирования Veritas по подписке (КРОК Облачные сервисы — первый и пока единственный провайдер в России, работающий по такой схеме).

• Возможность использования собственного выделенного сервера с NetBackup (по подписке) и самостоятельного администрирования или использования услуг КРОК Облачные сервисы (по согласованию). Это подходит для заказчиков со средней и крупной инфраструктурой.

• Быстрое развертывание сервиса в Облаке КРОК (сервер разворачивается из шаблона и через час готов к приему резервных копий. Общий сервер доступен всем и всегда).

Мы предлагаем бонус — бесплатное тестирование решения Veritas NetBackup и ресурсов облачной платформы и нашего S3-хранилища. Заявку на пробное тестирование можно направить по адресу: cloud@croc.ru. Мы подберем оптимальное решение и план тестирования и будем сопровождать вас по ходу проекта. Готовы ответить на любые ваши вопросы.

Вопрос. Может ли NetBackup работать с Hyper-V?

Алексей Казем. Да, мы предлагаем синтетическое резервное копирование для Hyper-V через интеграцию с WMI и через Block-Level Incremental Backup. Кроме того, есть возможность восстанавливать отдельные файлы из Hyper-V Backup Machine.

Вопрос. Предлагаете ли вы какой-то минимальный объем для небольших заказчиков?

Алексей Зотов. Нет. Некоторые заказчики защищают буквально несколько виртуальных машин или один почтовый сервер. Поскольку по подписке вы можете платить только за потребляемый объем, минимальный порог отсутствует. Если вам подходит NetBackup, вы можете пользоваться им без ограничений.

Вопрос. Есть ли возможность предоставить сервис резервного копирования в облаке для аттестованных сегментов инфраструктуры?

Алексей Зотов. Мы можем проработать вопрос резервного копирования аттестованной инфраструктуры по правилам регулятора, а также предложить варианты для защищенных сегментов, например, реализовать ваш сервер резервного копирования в изолированном сегменте с управлением, вынесенным вовне («спрятать» за NAT).

Алексей Казем. В настоящее время компания Veritas получает сертификат госрегулятора на средства резервного копирования NetBackup 9.0. Кроме того, NetBackup 9.0 поддерживает и российские операционные системы, включая ALT Linux и Linux Sfera, совместимость с которыми мы уже протестировали.

Вопрос. Расскажите про интересные проекты в России и за границей.

Алексей Казем. В прошлом году мы завершили несколько крупных проектов. Например, для одного заказчика мы реализовали проект с очень большим объемом frontend-данных и настроили резервное копирование более 900 ТБ с использованием двух ЦОДов и репликации.

Заказчик использовал IBM TSM, но его не устраивали показатели SLA. Он долго тестировал разные решения и выбирал между NetBackup, Commvault и Dell EMC. Заказчика, в основном, интересовала производительность, возможности виртуализации и резервного копирования, в первую очередь, Oracle на AIX и Windows.

Мы продемонстрировали очень хорошие результаты. Даже на обычном сервере NetBackup показал скорость восстановления Oracle выше, чем Data Domain на топовом оборудовании. В настоящее время мы уже проводим тестирование и планируем запуск проекта в ближайшем будущем.