Unable to enumerate all disks ошибка

Good day everyone. I changed HW for my esxi hosts, copied VM’s across, and I cannot start some anymore…Just getting Failed to power on virtual machine Nextcloud. Unable to enumerate all disks. Click here for more details.

I really would like to recover this VM…

ls :

[root@alien:/vmfs/volumes/5e493010-d9f2cbf0-c496-64006a66bf47/Nextcloud] ls -la
total 45525184
drwxr-xr-x    1 root     root         77824 Feb 17 06:18 .
drwxr-xr-t    1 root     root         73728 Feb 17 06:28 ..
-rw-------    1 root     root     115343360 Feb 16 13:16 Nextcloud-70d41263.vswp
-rw-------    1 root     root     2147483648 Feb 16 12:11 Nextcloud-Snapshot4.vmem
-rw-------    1 root     root       5688588 Feb 16 13:15 Nextcloud-Snapshot4.vmsn
-rw-------    1 root     root     2147483648 Feb 16 14:21 Nextcloud-Snapshot5.vmem
-rw-------    1 root     root       5713179 Feb 16 16:00 Nextcloud-Snapshot5.vmsn
-rw-------    1 root     root          8684 Feb 16 12:07 Nextcloud.nvram
-rw-------    1 root     root             0 Feb 17 06:18 Nextcloud.vmsd
-rw-------    1 root     root          3367 Feb 16 16:00 Nextcloud.vmx
-rw-------    1 root     root           150 Feb 16 16:00 Nextcloud.vmxf
-rw-------    1 root     root       1049088 Feb 16 13:15 Nextcloud0-000001-ctk.vmdk
-rw-------    1 root     root     15854505984 Feb 16 16:00 Nextcloud0-000001-delta.vmdk
-rw-------    1 root     root           446 Feb 16 16:00 Nextcloud0-000001.vmdk
-rw-------    1 root     root       1049088 Feb 16 13:15 Nextcloud0-000002-ctk.vmdk
-rw-------    1 root     root     9143619584 Feb 16 14:03 Nextcloud0-000002-delta.vmdk
-rw-------    1 root     root           453 Feb 16 12:07 Nextcloud0-000002.vmdk
-rw-------    1 root     root       1049088 Feb 16 16:00 Nextcloud0-ctk.vmdk
-rw-------    1 root     root     17179869184 Feb 16 13:15 Nextcloud0-flat.vmdk
-rw-------    1 root     root           614 Feb 16 14:03 Nextcloud0.vmdk
-rw-------    1 root     root        255071 Feb 16 16:00 vmware-19.log
-rw-------    1 root     root        207116 Feb 16 13:15 vmware-20.log
-rw-------    1 root     root        209982 Feb 16 13:15 vmware-21.log
-rw-------    1 root     root        212947 Feb 16 13:15 vmware-22.log
-rw-------    1 root     root        444723 Feb 16 13:15 vmware-23.log
-rw-------    1 root     root        260714 Feb 16 13:15 vmware-24.log
-rw-------    1 root     root        255139 Feb 16 16:00 vmware.log
[root@alien:/vmfs/volumes/5e493010-d9f2cbf0-c496-64006a66bf47/Nextcloud]

.encoding = "UTF-8"
config.version = "8"
virtualHW.version = "11"
virtualHW.productCompatibility = "hosted"
vmci0.present = "TRUE"
vmci0.id = "-986178109"
vmci0.pciSlotNumber = "34"
floppy0.present = "FALSE"
memSize = "2048"
bios.bootRetry.delay = "10"
sched.cpu.units = "mhz"
sched.cpu.affinity = "all"
sched.cpu.min = "0"
sched.cpu.shares = "normal"
sched.cpu.latencySensitivity = "normal"
sched.scsi0:0.shares = "normal"
sched.scsi0:0.throughputCap = "off"
sched.mem.min = "0"
sched.mem.minSize = "0"
sched.mem.shares = "normal"
powerType.powerOff = "soft"
powerType.suspend = "soft"
powerType.reset = "soft"
tools.upgrade.policy = "manual"
tools.syncTime = "FALSE"
tools.remindInstall = "FALSE"
scsi0.virtualDev = "pvscsi"
scsi0.present = "TRUE"
scsi0.pciSlotNumber = "160"
scsi0.sasWWID = "50 05 05 68 fa 83 cd f0"
sata0.present = "TRUE"
sata0:0.deviceType = "cdrom-raw"
sata0:0.clientDevice = "TRUE"
sata0:0.fileName = "Cdrom"
sata0:0.present = "TRUE"
sata0.pciSlotNumber = "35"
usb.present = "TRUE"
usb.pciSlotNumber = "32"
usb:1.speed = "2"
usb:1.present = "true"
usb:1.deviceType = "hub"
usb:1.port = "1"
usb:1.parent = "-1"
ehci.present = "TRUE"
ehci.pciSlotNumber = "33"
ethernet0.virtualDev = "vmxnet3"
ethernet0.networkName = "VM Network"
ethernet0.addressType = "generated"
ethernet0.wakeOnPcktRcv = "FALSE"
ethernet0.uptCompatibility = "TRUE"
ethernet0.present = "TRUE"
ethernet0.generatedAddress = "00:0c:29:38:1d:c3"
ethernet0.pciSlotNumber = "192"
ethernet0.generatedAddressOffset = "0"
displayName = "Nextcloud"
guestOS = "ubuntu-64"
toolScripts.afterPowerOn = "TRUE"
toolScripts.afterResume = "TRUE"
toolScripts.beforeSuspend = "TRUE"
toolScripts.beforePowerOff = "TRUE"
uuid.bios = "56 4d 4f 88 fa 83 cd fe-40 aa 7e 2d c5 38 1d c3"
uuid.location = "56 4d ed 3d 2d f1 c9 5a-e5 b2 f8 22 81 a4 bf 1f"
vc.uuid = "52 ae a4 02 b9 48 a0 23-60 3f e8 0b c4 c3 59 f5"
extendedConfigFile = "Nextcloud.vmxf"
nvram = "Nextcloud.nvram"
pciBridge0.present = "true"
pciBridge0.pciSlotNumber = "17"
pciBridge4.present = "true"
pciBridge4.virtualDev = "pcieRootPort"
pciBridge4.functions = "8"
pciBridge4.pciSlotNumber = "21"
pciBridge5.present = "true"
pciBridge5.virtualDev = "pcieRootPort"
pciBridge5.functions = "8"
pciBridge5.pciSlotNumber = "22"
pciBridge6.present = "true"
pciBridge6.virtualDev = "pcieRootPort"
pciBridge6.functions = "8"
pciBridge6.pciSlotNumber = "23"
pciBridge7.present = "true"
pciBridge7.virtualDev = "pcieRootPort"
pciBridge7.functions = "8"
pciBridge7.pciSlotNumber = "24"
svga.present = "true"
svga.guestBackedPrimaryAware = "true"
hpet0.present = "true"
RemoteDisplay.maxConnections = "-1"
vcpu.hotadd = "true"
replay.supported = "false"
monitor.phys_bits_used = "42"
vmotion.checkpointFBSize = "4194304"
vmotion.checkpointSVGAPrimarySize = "4194304"
softPowerOff = "FALSE"
checkpoint.vmState.readOnly = "FALSE"
migrate.hostLog = "./Nextcloud-5032ccb2.hlog"
toolsInstallManager.updateCounter = "6"
uuid.action = "keep"
scsi0:0.deviceType = "scsi-hardDisk"
scsi0:0.fileName = "Nextcloud0-000002.vmdk"
scsi0:0.present = "TRUE"
sched.swap.derivedName = "/vmfs/volumes/5b9c8b63-6ac3b44d-71b9-3464a99a57e4/Nextcloud/Nextcloud-70d41263.vswp"
replay.filename = ""
scsi0:0.redo = ""
cleanShutdown = "TRUE"
SCSI0:0.ctkEnabled = "True"
ctkEnabled = "TRUE"
usb:0.present = "TRUE"
usb:0.deviceType = "hid"
usb:0.port = "0"
usb:0.parent = "-1"

Обновлено 07.06.2022

Добрый день уважаемые читатели, сегодня расскажу как решается ошибка висящая на виртуальной машине в ESXi 5.5 и звучит она virtual machine disks consolidation is needed. Если перевести это дословно, то вас культурно просят восстановить целостность виртуальной машины, так как это не совсем хорошо, из за этого она может очень сильно проседать по производительности, и как следствие все сервисы в ней.

Устраняем virtual machine disks consolidation is needed в ESXI 5

Вот так вот выглядит эта ошибка, некое такое предупреждающее сообщение на вкладке Summary.

Возникла ошибка virtual machine disks consolidation is needed в ESXI 5.x.x, причина это удаление snapshot. После его удаления остались файлы которые не смогли слиться с основным файлом виртуального диска, и требуется провести консолидацию. Выбираете нужную машину правым кликом меню Power-Consolidate.

После чего произойдет слияние дисков, и предупреждение пропадет. Сам процесс слияние или merge может идти долго, все будет зависеть от некоторых факторов

• Загруженность виртуальной машины
• Ее размер
• Количество снапшотов, которые нужно консолидировать

У меня были случаи в практике, что виртуалка так консолидировалась 3 дня.

Устраняем virtual machine disks consolidation is needed в vCenter 7

На текущий момент у меня гипервизоры ESXI 7, тут эта ошибка так же легко встречается.

Тут принцип устранения такой же, выключите виртуальную машину и откройте контекстное меню «Snapshot — Consolidate«.

Дожидаемся когда закончиться наше задание консолидации.

После завершения задания убедитесь, что статус «virtual machine disks consolidation is needed» пропал.

Что делать, если штатная консолидация не помогла

Вот интересная ситуация, вроде бы задание отработало, но вот статус у виртуальной машины остался «Virtual machine disks consolidation is needed», лишь цвет предупреждения сменился на уведомительный.

Тут проблема в том, что если вы на уровне датастора посмотрите файлы виртуальной машины, то сможете обнаружить, что там много файлов от снимков.

Чтобы это поправить, вам необходимо в ручном режиме, создать снапшот и затем его просто удалить. Это позволит механизму обнаружить все имеющиеся снимки и объединить их.

Как объединить снимки из PowerCLI

Все эти же действия можно сделать и через PowerCLI, как его устанавливать смотрите по ссылке слева. Первое, что делаем, это подключаемся или к хосту или к vCenter серверу. Далее нам нужно получить список виртуальных машин с остатками от снимков. Чтобы получить список виртуальных машин, сообщающих о проблеме «Требуется консолидация дисков виртуальных машин», мы можем вызвать командлет Get-VM, чтобы определить, требуется ли консолидация виртуальных машин.

Далее выведем просто $VMs. В моем примере нашлось несколько виртуальных машин, где требуется консолидация.

Теперь, чтобы объединить диски, вам нужно выполнить:

Надеюсь вам помогла эта заметка и вы смогли устранить ошибку virtual machine disks consolidation is needed

Скрипт PowerShell для проверки и уведомлений по данной ошибке

Описанный ниже скрипт выполняет такие задачи:

• 1️⃣Ведет лог с долгохранящимися снапшотами и дисками в статусе «disks consolidation is needed»
• 2️⃣Проверяет снапшоты старше 30 дней
• 3️⃣Проверяет виртуальные машины на предмет статуса «disks consolidation is needed»
• 4️⃣отправляет на почту таблицу с результатами критериев

На выходе вы будите получать вот такого рода таблицу.

Дополнительно

Может быть ситуация, что вы используете прокси Veeam, для ускорения резервного копирования и в нем могут застревать диски, которые будут приводить к проблеме консолидации.

Предупреждение ‘Virtual Machine disks consolidation is needed’ на вкладке Summary виртуальной машины в консоли VMWare vSphere Client означает, что при удалении снапшотов (операция Delete или Delete All) на диске остались файлы, которые не удалось слить (commit) с основным файлом виртуального диска (vmdk). В результате вы не можете выполнить резервное копирование такой виртуальной машины, а ее производительность сильно деградирует.

Virtual machine Consolidation Needed status.
Virtual Machine disks consolidation is needed.

Самые распространённые причины появления ошибки consolidation is needed:

• Плохая производительность дискового хранилища, из-за которого удаление/консолидация снапшотов отваливаются по таймауту или большого размера снапшота;
• На VMFS хранилище недостаточно места для выполнения консолидации, должно быть свободно не менее 1 Гб (см. как расширить VMFS в VMware ESXi);
• Файлы снапшотов заблокированы vSphere или сторонним приложением (как правило это приложение резервного копирования, HP DataPtotector, Veeam или Netapp VSC). Убедитесь, что отсутствует запушенные процессы резервного копирования виртуальной машины;

  Проблема может быть вызвана добавлением дисков ВМ (hot-add) в апплайенс резевного копирования при выполнении бэкапов. В некоторых случаях нужно вручную отключить диски проблемных ВМ в настройках апплайенса резервного копирования (встречается в Veeam Backup Proxy, Symantec NetBackup и CommVault Media Agent).

• У ВМ более 32 снапшотов (максимальное количество, рекомендуемое VMware);
• Идет консолидация больший снапшотов;
• Проблемы с потерей подключения (возможно временные) между серверов vCenter и хостом ESXi.

Как выполнить консолидацию дисков в VMware?

Для исправления ошибки «Virtual machine Consolidation Needed status» необходимо щелкнуть ПКМ по виртуальной машине и выбрать в меню пункт Actions -> Snapshots -> Consolidate.

Появится окно с запросом:

Confirm Consolidate
This operation consolidates all redundant redo logs on your virtual machine. Are you sure you want to continue?

Подтвердите удаление избыточных логов. После этого vCenter выполнит консолидацию дисков и очистку логов. Процесс консолидации может идти долго в зависимости от размера ВМ, количества снапшотов и текущей нагрузки. Во время выполнения консолидации производительность ВМ может ухудшиться. Дождитесь окончания выполнения задания Consolidate virtual machine disk files и очистки логов.

При выполнении консолидации данные из дельта дисков сливаются с основным диском и лишние файлы на хранилище удаляются. После этого предупреждение о необходимости консолидации ВМ исчезнет.

Ошибки блокировки файлов при консолидации дисков VMware

В некоторых случая при выполнении консолидации в консоли vSphere может появится ошибка:

Unable to access file since it is locked. An error occurred while consolidating disks: Failed to lock the file. Consolidation failed for disk node ‘scsi0:0’: Failed to lock the file.

Или

Consolidate virtual machine disk files - Unable to access file since it is locked.

VMware в этом случае рекомендует выполнить перезапуск агентов Management agents на сервере ESXi. Для этого нужно подключиться к хосту ESXi по SSH и выполнить команду:

services.sh restart

Если это не помогло, проверьте кто заблокировал файлы виртуальной машины.

1. Перейдите в каталог ВМ на VMFS хранилище:
   # cd /vmfs/volumes/xxxxxx-xxxxxx-xxxx-xxxxxxx/VM_NAME
2. Выведите список заблокированных файлов ВМ и какие хосты ESXi держат данные файлы:
   # for i in `ls`; do vmfsfilelockinfo -p $i ;done|grep 'is locked in|Host owning the lock|Total time taken' | sed 's|Host owning the lock on file is||g'|sed 's|Total time|---|g' | awk '{print $1}' |uniq
3. Предыдущая команда вернёт примерно такой результат:

   ---
   "VM_NAME-df23cba2.vswp"
   esxi1,
   ---
   "VM_NAME-flat.vmdk"
   esxi2,
   esxi1

4. В данном примере видно, что файл VM_NAME-flat.vmdk заблокирован сразу двумя хостами. Чтобы снять блокировку файла вторым хостом, подключитесь к esxi2 по SSH и выполните команды:
   /etc/init.d/hostd restart
/etc/init.d/vpxa restart
5. Еще раз запустите консолидацию из интерфейса vSphere Client.

Однако вы можете попробовать разблокировать файлы виртуальной машины так:

1. Выключите виртуальную машины (если возможно);
2. Создайте новый снапшот;
3. Удалите все снапшоты ВМ с помощью пункта «Delete All Snapshots»;
4. Переместите ВМ на другой ESXi с помощью vMotion;
5. Попробуйте выполнить консолидацию снапшотов как указано выше.

Если опция Consolidate не активна в меню (серая кнопка), а в хранилище все еще находится большое количество дельта файлов снапшотов, скорее всего нарушена целостность цепочки снапшотов (ошибка Unable to enumerate all disks).

Попробуйте вручную удалить ВМ из списка (Remove from Inventory) и зарегистрировать VMX файла виртуальной машины из Datastore Browser. Если это не помогло, проверьте и исправьте ошибки в цепочке снапшотов как описано в статье “
The parent virtual disk has been modified since the child was created
” (https://kb.vmware.com/s/article/1007969).

Консолидация снапшотов ВМ VMware с помощью PowerCLI

Вы можете найти все виртуальные машины VMware, которые требуют консолидации с помощью PowerCLI (специальный модуь PowerShell для управления инфраструктурой VMware). Для этого подключитесь к своему серверу vCenter (или хосту ESXi):

Connect-VIServer vsphere.winitpro.ru

Чтобы получить список всех ВМ со статусом «Virtual machine disks consolidation is needed»:

Get-VM | Where-Object {$_.Extensiondata.Runtime.ConsolidationNeeded}

Теперь можно выполнить консолидацию дисков всех полученных ВМ:

Get-VM | Where-Object {$_.Extensiondata.Runtime.ConsolidationNeeded} | foreach {$_.ExtensionData.ConsolidateVMDisks_Task()}

Можно выполнить автоматическую консолидацию снапшотов ВМ старше 30 дней с помощью такого PowerShell скрипта:

$VMName = Get-VM | Get-Snapshot |
Where {$_.Created -lt (Get-Date).AddDays(-30)} | select VM |
ForEach-Object {
$VMName.ExtensionData.ConsolidateVMDisks()
}