esxi 6.0 U2 power failure en nu zijn alle vm locked

[sander.jansen]

hey, ik had een stroomstoring terwijl mijn esxi aal stond en 4 vms powerd on waren. nu zijn alle vms die powerd on waren invalid. ik kan geen files kopieren of opnieuw registreren van wegen een lock.

ik heb al vanalles geprobeerd waaronder: https://kb.vmware.com/sel...isplayKC&externalId=10051 de owner mac adres is hetzelfde als de esxi host mac adres maar kan er nog steeds niks mee...

weet iemand hoe ik alsnog deze lock kan verwijderen? ik kan namelijk de .lck file niet verwijderen of vrijgeven...

Als ik de file probeer te verwijderen krijg ik:
rm: can't remove 'Freenas.vmx.lck': Invalid argument

weet iemand hoe ik dit kan oplossen?

[arjants]

VMFS of NFS storage?

Netjes oplossen?
https://kb.vmware.com/sel...isplayKC&externalId=10051

Snelle fix?
Nieuwe VM aanmaken met dezelfde hardware en VMDK's koppelen

[ Voor 6% gewijzigd door arjants op 23-01-2017 20:49 ]

[sander.jansen]

Het gaat om vmfs storage.

Ik heb ook geprobeerd om de vmdk files (en andere files) te downloaden via de datastore brouwser maar ook dat lukt niet. (zelfs via ssh niet- winscp)

Ook kan ik via ssh geen "touch" doen op een aantal bestanden, invalid argument:

touch: Freenas-8f50d20a.vswp: Invalid argument
touch: Freenas-flat.vmdk: Invalid argument
touch: Freenas.nvram: Invalid argument
touch: Freenas.vmx: Invalid argument
touch: Freenas.vmx.lck: Invalid argument
touch: Freenas.vmx~: Invalid argument
touch: vmware.log: Invalid argument
touch: vmx-Freenas-2404438538-1.vswp: Invalid argument


Ik had de guide geprobeerd maar ben niet ver gekomen.

als ik een nieuwe vm aanmaak met de bestaande vmdk, dan krijg ik dit:

State
Failed - 22 (Invalid argument)
Errors
22 (Invalid argument)
Cannot open the disk '/vmfs/volumes/587c1f18-f9113271-bd7c-d050995afa5e/Freenas/Freenas.vmdk' or one of the snapshot disks it depends on.
Module Disk power on failed.
Failed to start the virtual machine.

[ Voor 40% gewijzigd door sander.jansen op 23-01-2017 21:07 ]

[arjants]

Mag je wel schrijven in die directory?
M.A.W. is die nu niet read only om een reden?

[sander.jansen]

met winscp kan ik gewoon mappen aanmaken in de map van de vm.

dit is de root van de datastore:

drwxr-xr-t 1 root root 2380 Jan 23 20:05 .
drwxr-xr-x 1 root root 512 Jan 23 20:19 ..
-r-------- 1 root root 9830400 Jan 16 01:17 .fbb.sf
-r-------- 1 root root 267026432 Jan 16 01:17 .fdc.sf
drwxr-xr-x 1 root root 980 Jan 23 19:33 .locker
-r-------- 1 root root 1179648 Jan 16 01:17 .pb2.sf
-r-------- 1 root root 268435456 Jan 16 01:17 .pbc.sf
-r-------- 1 root root 262733824 Jan 16 01:17 .sbc.sf
drwx------ 1 root root 280 Jan 16 01:17 .sdd.sf
-r-------- 1 root root 4194304 Jan 16 01:17 .vh.sf
drwxr-xr-x 1 root root 2660 Jan 23 20:19 Freenas
drwxr-xr-x 1 root root 3640 Jan 22 20:59 HDD
drwxr-xr-x 1 root root 840 Jan 18 01:23 ISO
drwxr-xr-x 1 root root 2660 Jan 22 20:56 Serviio
drwxr-xr-x 1 root root 1680 Jan 18 04:22 Ubuntu
drwxr-xr-x 1 root root 5180 Jan 23 12:38 freenas-test
drwxr-xr-x 1 root root 3220 Jan 22 19:54 server.yor-it.nl

en dit is de map van een van de locked vms:

drwxr-xr-x 1 root root 2660 Jan 23 20:19 .
drwxr-xr-t 1 root root 2380 Jan 23 20:05 ..
-rw------- 1 root root 8589934592 Jan 22 20:58 Freenas-8f50d20a.vswp
-rw------- 1 root root 12884901888 Jan 23 14:01 Freenas-flat.vmdk
-rw------- 1 root root 8684 Jan 23 14:29 Freenas.nvram
-rw------- 1 root root 501 Jan 23 20:07 Freenas.vmdk
-rw-r--r-- 1 root root 0 Jan 23 20:07 Freenas.vmsd
-rwxr-xr-x 1 root root 5855 Jan 22 20:58 Freenas.vmx
-rw------- 1 root root 0 Jan 22 20:58 Freenas.vmx.lck
-rw------- 1 root root 47 Jan 23 20:07 Freenas.vmxf
-rwxr-xr-x 1 root root 5854 Jan 22 20:58 Freenas.vmx~
-rw-r--r-- 1 root root 228701 Jan 23 20:07 vmware-10.log
-rw-r--r-- 1 root root 228120 Jan 23 20:07 vmware-11.log
-rw-r--r-- 1 root root 194482 Jan 23 20:07 vmware-12.log
-rw-r--r-- 1 root root 176203 Jan 23 20:07 vmware-7.log
-rw-r--r-- 1 root root 183118 Jan 23 20:07 vmware-8.log
-rw-r--r-- 1 root root 200353 Jan 23 20:07 vmware-9.log
-rw-r--r-- 1 root root 174102 Jan 22 21:01 vmware.log
-rw------- 1 root root 243269632 Jan 22 20:58 vmx-Freenas-2404438538-1.vswp

[ Voor 34% gewijzigd door sander.jansen op 23-01-2017 21:22 ]

[arjants]

Kun je de inhoud van de vmx file eens posten?

[ Voor 19% gewijzigd door arjants op 23-01-2017 22:05 ]

[sander.jansen]

Ik kan het bestand niet openen met vi (en ook niet met winscp) invalid argument (aangemeld als root)

winscp foutmelding:
Ongeldig bericht (foutief ingedeeld pakket of protocolincompatibiliteit).
Foutcode: 5
Foutmelding van server: Bad message

gezien de rechten van de bestanden zou ik op zn minst lees rechten moeten hebben...zou alleen niet weten met welke gebruiker als het root niet is...

[Microkid]

Blijkbaar is je VMFS gelocked:
https://communities.vmwar...d/425379?start=0&tstart=0
https://communities.vmwar...d/407273?start=0&tstart=0
https://communities.vmwar...d/417507?start=0&tstart=0

[ Voor 41% gewijzigd door Microkid op 23-01-2017 22:19 ]

[sander.jansen]

Van wat ik eruit haal zou ik mijn esxi uit moeten zetten, een andere computer pakken en daar esxi op installeren en dan de datastore daar aan koppelen en dan de lck bestanden en folders verwijderen?

heb maar 1 esxi computer draaien op het moment dus zit niet met meerdere esxi omgevingen en clusters enzo... heb wel nog een systeem waar ik even esxi op kan zetten om dit te proberen...

Ik weet alleen niet of het een probleem gaat zijn dat esxi geinstalleerd staat op de zelfde schijf als mijn dataset...


EDIT:
Ik heb net een nieuwe esxi geinstalleerd maar krijg het niet voor elkaar om de originele datastore te vinden?

Ik heb de schijf weer aangesloten op de originele computer en gestart, als ik de lock wil breken krijg ik dit:
source: https://kb.vmware.com/sel...playKC&externalId=1009570
[root@localhost:/dev/disks] vmkfstools -B /vmfs/devices/disks/mpx.vmhba32:C0:T0:L0


VMware ESX Question:
LVM lock on the device mpx.vmhba32:C0:T0:L0 will be forcibly broken. See the vmkfstools or ESX documentation for information on breaking the LVM lock.

Ensure that multiple servers are not accessing this device.

Continue to break lock?

0) _Yes
1) _No

Select a number from 0-1: 0

Error breaking LVM device lock.
Error: Permission denied

Ik vraag me wel af of de hele vmfs een block heeft gezien ik een vm die uit stond (en du sniet gelocked is) wel kan starten en deze normaal werkt. van wat ik hier uit haal zouden alleen de vms die aan stonden met de stroomstoring dit probleem hebben... dus individuele files gelockt zijn...

[ Voor 54% gewijzigd door sander.jansen op 23-01-2017 23:49 ]

[H143]

sander.jansen schreef op maandag 23 januari 2017 @ 22:23:
Van wat ik eruit haal zou ik mijn esxi uit moeten zetten, een andere computer pakken en daar esxi op installeren en dan de datastore daar aan koppelen en dan de lck bestanden en folders verwijderen?

heb maar 1 esxi computer draaien op het moment dus zit niet met meerdere esxi omgevingen en clusters enzo... heb wel nog een systeem waar ik even esxi op kan zetten om dit te proberen...

Ik weet alleen niet of het een probleem gaat zijn dat esxi geinstalleerd staat op de zelfde schijf als mijn dataset...


EDIT:
Ik heb net een nieuwe esxi geinstalleerd maar krijg het niet voor elkaar om de originele datastore te vinden?

Ik heb de schijf weer aangesloten op de originele computer en gestart, als ik de lock wil breken krijg ik dit:
source: https://kb.vmware.com/sel...playKC&externalId=1009570
[root@localhost:/dev/disks] vmkfstools -B /vmfs/devices/disks/mpx.vmhba32:C0:T0:L0


VMware ESX Question:
LVM lock on the device mpx.vmhba32:C0:T0:L0 will be forcibly broken. See the vmkfstools or ESX documentation for information on breaking the LVM lock.

Ensure that multiple servers are not accessing this device.

Continue to break lock?

0) _Yes
1) _No

Select a number from 0-1: 0

Error breaking LVM device lock.
Error: Permission denied

Ik vraag me wel af of de hele vmfs een block heeft gezien ik een vm die uit stond (en du sniet gelocked is) wel kan starten en deze normaal werkt. van wat ik hier uit haal zouden alleen de vms die aan stonden met de stroomstoring dit probleem hebben... dus individuele files gelockt zijn...

even een vraagje ben je hier ooit nog mee verder gekomen? ik zit met precies het zelfde probleem nu

[GrasshopperNL]

En heb je back-ups? Anders die terugzetten lijkt me.