Восстановление виртуальных дисков и снимков OLVM/oVirt, а также данных iSCSI LUN

Что делать, если виртуальная машина OLVM или oVirt перестает загружаться, ее диски исчезают из хранилища или важные файлы случайно удаляются внутри гостевой операционной системы? В этой статье мы покажем, как с помощью Hetman RAID Recovery восстановить удаленные копии дисков виртуальной машины из зашифрованного тома LVM RAID 6. Мы подключим эти диски в их текущем состоянии и в состоянии, сохраненном в снимке, созданном в OLVM. Мы сравним их содержимое и сохраним необходимые файлы без запуска виртуальной машины.

Восстановление виртуальных дисков и снимков OLVM/oVirt, а также данных iSCSI LUN

OLVM (Oracle Linux Virtualization Manager) и oVirt используют сложную инфраструктуру хранения, включающую виртуальные диски, снимки, домены хранения и сетевое хранилище iSCSI. Сбой сервера, повреждение файловой системы, ошибки при работе с хранилищем или выход из строя физических дисков могут привести к потере доступа к виртуальным машинам и критически важным данным.

В этой статье мы рассмотрим, как восстановить виртуальные диски OLVM/oVirt VM, снимки и iSCSI LUN после сбоев или повреждения хранилища. Мы проанализируем структуру доменов хранения, взаимосвязи между базовыми образами и снимками, а также способы поиска и восстановления виртуальных дисков. Особое внимание будет уделено работе с iSCSI LUN, подключению поврежденного хранилища и восстановлению данных без риска перезаписи исходной информации.

Перейти к просмотру
Как восстановить диски VM OLVM/oVirt, снапшоты и iSCSI LUN

Как восстановить диски VM OLVM/oVirt, снапшоты и iSCSI LUN

ШАГ 1. Подготовка тестовой среды

Для демонстрации мы подготовили тестовую среду на сервере Dell PowerEdge R710, работающем под управлением Oracle Linux 9.8.

Компонент Характеристики и назначение
Сервер Dell PowerEdge R710
Форм-фактор Стоечный сервер 2U
Процессоры До двух процессоров Intel Xeon серии 5500 или 5600
Архитектура CPU Intel 64, x86-64
ОЗУ До 288 ГБ DDR3 ECC Registered (в зависимости от конфигурации)
Слоты памяти 18 DIMM
RAID-контроллер Dell PERC 6/i или H700 (в зависимости от конфигурации)
Поддерживаемые уровни RAID RAID 0, 1, 5, 6, 10, 50, 60 (в зависимости от контроллера)
Накопители SAS- или SATA HDD/SSD, в зависимости от конфигурации дисковой подсистемы
Сетевые интерфейсы Встроенные порты Gigabit Ethernet
Слоты расширения PCI Express
Операционная система Oracle Linux 9.8
Ядро Linux UEK или RHCK, в зависимости от выбранного ядра
Файловые системы XFS, ext4 и другие файловые системы, поддерживаемые Oracle Linux
Виртуализация KVM/QEMU
Управление сервером Dell iDRAC 6
Назначение Серверная виртуализация, хранение данных, работа с виртуальными машинами и сетевым хранилищем

К серверу подключены пять физических дисков. С помощью LVM на них были созданы три логических тома типа RAID 6. Каждый из них распределен по всем пяти дискам, отдельно зашифрован с использованием LUKS2 и отформатирован в файловую систему ext4.

С помощью LVM были созданы три логических тома RAID 6

На втором томе находится OLVM NFS storage с тремя дисками виртуальной машины Windows 10: системным диском объемом 20 ГБ и двумя дополнительными дисками по 2 ГБ (thin и thick).

Хранилище OLVM NFS с тремя дисками виртуальной машины

После заполнения дисков тестовыми файлами мы создали снимок виртуальной машины, который зафиксировал состояние всех трех дисков. Позже мы удалили некоторые файлы с обоих дополнительных дисков по 2 ГБ внутри гостевой Windows. Это позволит сравнить текущее содержимое этих дисков с состоянием, сохраненным в снимке.

Дополнительно, чтобы проверить восстановление, мы скопировали папку хранилища NFS вместе с файлами дисков, снимком и связанными метаданными на третий зашифрованный том, а затем удалили эту копию.

Папка хранилища NFS вместе с файлами дисков, снимком и связанными метаданными

Также к Windows 10 были подключены два Direct LUN с Synology емкостью 1 ГБ и 2 ГБ. В гостевой системе они отображались как отдельные диски, с которых мы также удалили некоторые файлы.

Их данные не входили в снимок виртуальной машины, поэтому эти LUN будут анализироваться отдельно.

ШАГ 2. Подключение дисков

Перейдите на компьютер, где установлена программа Hetman RAID Recovery.

Для восстановления данных с повреждённых RAID-массивов, NAS-устройств и других многодисковых систем хранения.

Сначала мы восстановим копии дисков виртуальной машины OLVM. Для этого мы будем использовать посекторные образы пяти физических дисков сервера. Они содержат полную посекторную копию накопителей, включая области, где могут сохраняться удаленные данные, и позволяют проводить анализ без повторного обращения к исходным дискам.

Hetman RAID Recovery: посекторные образы пяти физических дисков сервера

Если диски исправны, их можно подключить к компьютеру напрямую через соответствующий контроллер или совместимый адаптер. Однако если диски повреждены или нестабильны, лучше сначала создать полные образы и проводить дальнейший анализ уже по ним.

Hetman RAID Recovery: подключенные образы пяти физических дисков сервера

ШАГ 3. Расшифровка LUKS2 и анализ файловой системы

После подключения дисков Hetman RAID Recovery анализирует метаданные LVM и автоматически обнаруживает три логических тома RAID 6. Они отображаются на главном экране в разделе RAID Volumes.

Hetman RAID Recovery анализирует метаданные LVM и автоматически обнаруживает логические тома RAID 6

Рядом с томами видна метка LUKS, что означает, что их содержимое зашифровано. Мы выбираем третий том, из которого была удалена копия папки хранилища OLVM, и открываем его двойным щелчком. В окне Unlock Disk вводим пароль или указываем файл ключа для разблокировки тома.

Hetman RAID Recovery: рядом с томами видна метка LUKS, что означает, что их содержимое зашифровано

После разблокировки программа определяет файловую систему ext4 и открывает мастер выбора типа анализа. Оставляем выбранным Fast scan, нажимаем Next и ждем завершения сканирования.

Hetman RAID Recovery: Fast scan

В нашем случае этого режима достаточно для поиска удаленных папок. Если нужные данные не найдены в результатах, можно повторить анализ, выбрав Full analysis и файловую систему Ext2/3/4. Такой поиск более тщательный и занимает больше времени.

После завершения процесса нажмите Finish и перейдите к найденной структуре каталогов.

Hetman RAID Recovery: найденная структура каталогов

ШАГ 4. Поиск и восстановление дисков OLVM

В результатах анализа откройте найденную папку vm-storage. Внутри перейдите в папку домена хранения с именем UUID, а затем в images.

Hetman RAID Recovery: найденная структура каталогов

Здесь видны папки и файлы с длинными идентификаторами UUID. Именно так OLVM хранит виртуальные диски и их состояния. Вместе с файлами дисков находятся связанные метаданные, которые помогают определить их параметры и взаимосвязи.

Hetman RAID Recovery: папки и файлы с длинными идентификаторами UUID

Чтобы позже подключить диски вместе со снимком, сохраните всю папку vm-storage вместе с подкаталогами и метаданными. Это позволит программе найти связанные файлы и отобразить доступные состояния каждого диска.

Вернитесь в родительскую папку, выберите vm-storage и нажмите Recovery. В мастере выберите сохранение на жесткий диск и укажите папку назначения на другом физическом диске.

Hetman RAID Recovery: выберите vm-storage и нажмите Recovery

Не сохраняйте восстановленные файлы на те диски, с которых выполняется восстановление: это может перезаписать данные, которые еще нужно восстановить.

Запустите операцию сохранения и дождитесь ее завершения. Далее мы подключим восстановленную папку хранилища к программе, чтобы проанализировать диски виртуальной машины и ее снимок.

ШАГ 5. Подключение восстановленных дисков как образов

Папка хранилища сохранена. Теперь мы подключим диски виртуальной машины вместе со снимком, чтобы получить доступ к файлам внутри них.

Нажмите Mount Disk. В разделе Virtual machine disk images выберите QEMU и нажмите Next.

Hetman RAID Recovery: в разделе Virtual machine disk images выберите QEMU

В окне выбора укажите всю восстановленную папку vm-storage, которая в нашей среде использовалась как OLVM NFS storage, и нажмите Select Folder. Программа проверит ее содержимое, найдет файлы виртуальных дисков и определит взаимосвязи между их состояниями.

Hetman RAID Recovery: в окне выбора укажите всю восстановленную папку vm-storage

В следующем окне мы видим три группы:

  • два дополнительных диска по 2 ГБ;
  • thin и thick;
  • системный диск объемом 20 ГБ.

Для каждого из них отображается состояние снимка, помеченное как Snapshot #1, и текущее состояние, помеченное как Active. Для сравнения мы выбираем оба состояния двух дополнительных дисков и нажимаем Next.

Hetman RAID Recovery: Snapshot #1

После подключения они отображаются на главном экране как четыре отдельных диска. Программа определяет на них разделы NTFS с метками THIN-2GB и THICK-2GB. Каждая метка отображается дважды, поскольку мы подключили два состояния соответствующего диска.

Теперь каждое из этих состояний можно открыть и проанализировать как обычный диск, чтобы просмотреть и сохранить необходимые файлы.

Hetman RAID Recovery: разделы NTFS с метками THIN-2GB и THICK-2GB

ШАГ 6. Анализ дисков и их снимков

Начнем с текущего состояния одного из дополнительных дисков. Откройте его раздел NTFS двойным щелчком. В мастере анализа выберите Fast scan, нажмите Next, а после завершения — Finish.

Hetman RAID Recovery: в мастере анализа выберите Fast scan

Перейдите в папку General с тестовыми данными. Здесь видны как существующие файлы, так и файлы, удаленные в процессе работы в Windows. Удаленные элементы программа помечает красным крестиком.

Hetman RAID Recovery: папка General с тестовыми данными

Теперь откройте состояние снимка того же диска и также выполните Fast scan. После завершения перейдите в ту же папку.

В сохраненном состоянии файлы, которые позже были удалены, отображаются без красных крестиков. На момент создания снимка они еще присутствовали на диске, поэтому здесь можно восстановить их более ранние версии.

Аналогичным образом выполняется анализ текущего состояния и снимка второго дополнительного диска.

Проверьте содержимое требуемых файлов в окне предпросмотра. Программа позволяет просматривать документы, изображения, содержимое архивов и видеофайлы.

Выберите необходимые файлы из текущего состояния или из снимка, нажмите Recovery и сохраните их на другой физический диск.

Hetman RAID Recovery: выберите необходимые файлы и нажмите Recovery

ШАГ 7. Подключение Synology и поиск файлов LUN

Мы уже проанализировали диски OLVM и их снимок. Теперь перейдем к двум Direct LUN из хранилища Synology, с которых также были удалены некоторые файлы в Windows.

Подключаем Synology к Hetman RAID Recovery через SSH.

Hetman RAID Recovery: подключение Synology к Hetman RAID Recovery через SSH

После установления соединения программа отображает физические диски и тома, доступные на NAS. В списке выберите основной том Synology, отметьте его и нажмите Next. Программа проверит его структуру и добавит том в список дисков.

Hetman RAID Recovery: программа отображает физические диски и тома, доступные на NAS

Откройте его двойным щелчком и запустите быстрое сканирование.

Hetman RAID Recovery: программа отображает физические диски и тома, доступные на NAS

На нашей Synology данные iSCSI LUN хранятся в каталоге @iSCSI. Во вложенном каталоге LUN находятся папки FILE и THIN: первый LUN расположен в FILE, а второй — в THIN.

Hetman RAID Recovery: во вложенном каталоге LUN находятся папки FILE и THIN

Откройте каталог с именем UUID в каждой папке. В этой тестовой конфигурации каждый LUN представлен одним файлом, содержащим блочные данные диска, ранее подключенного к Windows 10. Выберите оба файла, нажмите Recovery и сохраните их на другой физический диск.

Hetman RAID Recovery: откройте каталог с именем UUID в каждой папке

ШАГ 8. Анализ образов LUN и восстановление удаленных файлов

После сохранения LUN 1 и LUN 2 подключите их к Hetman RAID Recovery как образы дисков. Нажмите Mount Disk, выберите RAW disk images и перейдите к следующему шагу.

Hetman RAID Recovery: нажмите Mount Disk, выберите RAW disk images

Поскольку файлы LUN не имеют стандартного расширения образа, измените фильтр на All files в окне выбора и добавьте оба файла по одному.

Hetman RAID Recovery: измените фильтр на All files в окне выбора

Подключенные образы отображаются в списке дисков. Программа определяет на них разделы NTFS.

Hetman RAID Recovery: подключенные образы отображаются в списке дисков

Откройте раздел первого LUN, выполните быстрое сканирование, а затем повторите эти действия для второго. В результатах видны как существующие файлы, так и данные, удаленные в процессе работы в Windows 10. Такие элементы программа помечает красным крестиком.

Hetman RAID Recovery: существующие файлы и данные, удаленные в процессе работы в Windows 10

Найдите необходимые документы, фотографии, архивы и видеозаписи и проверьте их содержимое в окне предпросмотра.

Выберите файлы, которые нужно восстановить, нажмите Recovery и сохраните их на физический диск.

Вывод

В этой статье с помощью Hetman RAID Recovery мы восстановили удаленную копию хранилища OLVM из зашифрованного тома LVM RAID 6. Программа автоматически определила структуру тома, а после ввода пароля предоставила доступ к его содержимому.

Мы подключили восстановленные диски вместе со снимком виртуальной машины и сравнили их состояния. В текущем состоянии были найдены удаленные файлы, а в снимке те же файлы были доступны до удаления. Необходимые данные были просмотрены и сохранены без запуска Windows и без отката виртуальной машины.

Отдельно мы подключили Synology через SSH, сохранили файлы двух Direct LUN и проанализировали их как образы дисков. Это позволило восстановить данные, удаленные с них в гостевой системе.

Dmytriy Zhura

Автор: , Технический писатель

Дмитрий Жура – автор и один из IT-инженеров компании Hetman Software. Имеет почти 10 летний опыт работы в IT-сфере: администрирование и настройка серверов, установка операционных систем и различного программного обеспечения, настройка сети, информационная безопасность, внедрения и консультация по использованию специализированного ПО. Является экспертом в области восстановления данных, файловых систем, устройств хранения данных и RAID массивов.

Andrey Mareev

Редактор: , Технический писатель

В далеком 2005 году, я получил диплом по специальности «Прикладная математика» в Восточноукраинском национальном университете. А уже в 2006 году, я создал свой первый проект по восстановлению данных. С 2012 года, начал работать в компании «Hetman Software», отвечая за раскрутку сайта, продвижение программного обеспечения компании, и как специалист по работе с клиентами.

Рекомендуем для вас