Zuinige ESXi Server

[FireDrunk]

Dat geld ook nog steeds. Veel borden met een Q77 hebben het doorgaans wel ingevoerd (VT-d) maar er zijn er ook een paar waar ofwel de implementatie bagger is, of de optie gewoon niet aanwezig is.

Ik heb zelfs een bord waar het in het BIOS zit, maar het chipset kan het helemaal niet (Biostar H61 bord).

Wat dat betreft moet je altijd op internet zoeken naar relevante ervaringen van mensen die het daadwerkelijk werkend hebben gekregen.

[C00KW4US]

Ik ben op zoek naar een mobo (1155) met twee lan interfaces die beide out-of-the-box werken met ESXi. Welke moet ik hebben?

[Pantagruel]

C00KW4US schreef op maandag 19 november 2012 @ 14:09:
Ik ben op zoek naar een mobo (1155) met twee lan interfaces die beide out-of-the-box werken met ESXi. Welke moet ik hebben?

Je zou de VMware HCL search pagina met een bezoekje kunnen vereeren en je favo NIC's kunnen opzoeken. Als alternatief wil Google ook wel behulpzaan zijn.

[xelnaha]

of het forum doorlezen, staan genoeg voorbeelden in welke werkt met 2 nics

[analog_]

x9scm-iif

[abusimbal]

C00KW4US schreef op maandag 19 november 2012 @ 14:09:
Ik ben op zoek naar een mobo (1155) met twee lan interfaces die beide out-of-the-box werken met ESXi. Welke moet ik hebben?

Ik heb de Gigabyte GA-Z77N-WIFI een mini-ITX met 2 Realtek 8111E lan's.
Vind het geweldig dat ESXi wel met Realteks werkt en niet met alle Intel's.

[hans_lenze]

Dat moederbord met die dual port NIC: pricewatch: Intel Pro/1000 PT Dual Port

Goedkoper op Ebay te vinden trouwens.

[jadjong]

analog_ schreef op maandag 19 november 2012 @ 16:27:
x9scm-iif

Alleen de 82574L doet het, de 82579LM werkt pas met een zelfgeknutselde driver waar niet iedereen succesvolle ervaringen mee heeft.

[analog_]

jadjong schreef op maandag 19 november 2012 @ 23:28:
[...]

Alleen de 82574L doet het, de 82579LM werkt pas met een zelfgeknutselde driver waar niet iedereen succesvolle ervaringen mee heeft.

De IIF heeft twee keer Intel® 82574L Dual port GbE LAN.

[FireDrunk]

abusimbal schreef op maandag 19 november 2012 @ 20:37:
[...]

Ik heb de Gigabyte GA-Z77N-WIFI een mini-ITX met 2 Realtek 8111E lan's.
Vind het geweldig dat ESXi wel met Realteks werkt en niet met alle Intel's.

Dat heeft weinig met ESX te maken, en des te meer met de officiele Intel driver.. Die jongens koppelen gewoon niet al hun PCI-ID's. En dat terwijl alle Intel netwerkkaarten (behalve 10 jaar oude legacy troep) met dezelfde driver werkt...

Gewoon politiek geneuzel.

[CH4OS]

abusimbal schreef op maandag 19 november 2012 @ 20:37:
Ik heb de Gigabyte GA-Z77N-WIFI een mini-ITX met 2 Realtek 8111E lan's.
Vind het geweldig dat ESXi wel met Realteks werkt en niet met alle Intel's.

De Intel CT Desktop adapter werkt gewoon? Dat is een goedkope NIC van Intel, nog geen 30 tientjes.

[FireDrunk]

Heeft er iemand hier al eens custom VIB's / OEM.tgz's gebouwd?

Ik heb al een driver, maar ik wil graag een PCI:ID toevoegen aan de reeds bestaande VIB.

Iemand die daar een simpele handleiding voor heeft?

[xelnaha]

Yup,

is niet zo heel moeilijk, heb ook ooit wat handleidingen gebruikt, ff zoeken voor je

gevonden:

dit is voor 3.5, maar zal niet zo heel veel anders zijn voor 5 gok ik

http://www.vm-help.com/esx/esx3i/customize_oem_tgz.php

[ Voor 43% gewijzigd door xelnaha op 22-11-2012 18:33 . Reden: link gevonden :) ]

[Wolly]

abusimbal schreef op woensdag 24 oktober 2012 @ 23:00:
Vandaag mijn nieuwe test esxi gebouwd en geinstalleerd.
[afbeelding]

#	Product	Prijs	Subtotaal
1	Intel Core i7 3770S Boxed	€ 274,45	€ 274,45
1	Gigabyte GA-H77N-WIFI	€ 110,30	€ 110,30
1	Antec ISK 300-150	€ 71,60	€ 71,60
1	Corsair CMX16GX3M2A1600C11	€ 62,50	€ 62,50
1	Crucial m4 CT512M4SSD2 512GB	€ 344,69	€ 344,69
Bekijk collectie Importeer producten		Totaal	€ 863,54

Heb je enig idee van het stroomverbruik?

[abusimbal]

Nog niet getest. Zou dit eens moeten doen.

EDIT: BTW, zag dat Gigabyte een dual lan mini-ITX B75 moederbordje heeft uigebracht.
pricewatch: Gigabyte GA-B75N

[ Voor 69% gewijzigd door abusimbal op 23-11-2012 08:55 ]

[bsbfx]

Ik was aan het overwegen om mijn huidige Ubuntu thuisserver te vervangen (een Athlon 64 4800+) met een zuinige ESXi 5 machine. Echter aangezien ik de “diensten” die ik graag 24/7 wil draaien (Asterisk / kleine lamp & ssh gateway) reeds heb ondergebracht op een RPi kwam ik er achter dat mijn desktop computer en mijn server eigenlijk altijd tegelijk aanstaan.

Onder het motto 1 pc verbruikt minder dan 2, leek met mij interessant om te kijken of het mogelijk zou zijn om mijn computer en server samen te voegen. Gelukkig blijkt dat te kunnen en hebben een aantal van jullie reeds een dusdanig systeem m.b.v. GPU passthrough aan de praat.

Nu rees bij mij echter de vraag of het misschien ook mogelijk is om dit kunstje voor een tweede machines te realiseren? Twee Windows VMs met elk hun eigen videokaart / keyboard / muis, zodat ik ook de derde PC in huis ook via ESXi kan laten lopen.

Ik heb op het VMWare forum gezien dat er mensen zijn die dit m.b.v. enterprise hardware aan de praat hebben gekregen echter is dit voor een thuis project wat begrotelijk. Heeft iemand hier reeds ervaring mee en zo ja met welke hardware heb je hiervoor nodig of is dit niet echt een mogelijkheid vanwege de beperkte hoeveelheid devices die kunnen worden doorgegeven?

[jadjong]

bsbfx schreef op vrijdag 23 november 2012 @ 16:46:
Nu rees bij mij echter de vraag of het misschien ook mogelijk is om dit kunstje voor een tweede machines te realiseren? Twee Windows VMs met elk hun eigen videokaart / keyboard / muis, zodat ik ook de derde PC in huis ook via ESXi kan laten lopen.

Ik heb op het VMWare forum gezien dat er mensen zijn die dit m.b.v. enterprise hardware aan de praat hebben gekregen echter is dit voor een thuis project wat begrotelijk. Heeft iemand hier reeds ervaring mee en zo ja met welke hardware heb je hiervoor nodig of is dit niet echt een mogelijkheid vanwege de beperkte hoeveelheid devices die kunnen worden doorgegeven?

Per VM heb je een videokaart en een usb-controller nodig. De meeste moederborden hebben onboard slechts twee usb-controllers, met daaraan meerdere poorten. Meer dan twee vm's betekent losse pci-e usb-kaartjes. Sommige moederborden hebben onboard nog een extra usb(3.0)-controller van realtek/asmedia/enz. Deze zitten vaak samen met firewire, eSata of andere zooi achter een enkele pci-bridge. ESX kan geen apparaten achter een bridge individueel doorgeven, dus alles of niets. Wanneer ethernet ook aan deze bridge vast zit is de extra usb-controller nutteloos.
Wanneer je ESX vanaf USB wilt laten booten ben je al een controller kwijt.

Videokaarten kan je bijprikken zolang je voldoende pci-e sloten hebt.
Bij gebrek aan videokaarten ben ik zelf niet verder gekomen dan twee vm's, dat liep verrassend vloeiend. Het idee was om een desktop en htpc/xbmc vm op dezelfde hardware te draaien.
Msi X58
Ati 66nogiets HTPC
Ati 77nogiets Desktop

[Verwijderd]

Na lang wikken en wegen ben ik ook overgegaan op het samenstellen van een zuinige ESXI machine.
Dit heeft geleid tot de volgende configuratie:

^{be quiet voeding system power 350w 80+
2 x Corsair 2x8GB CMV16gx3m2a1333c9
intel core i5 3350P 3.10 GHZ 6mb box
Intel PCI adapter pro/100gt 1GB
MSI b75ma-p45
samsung SSD 128gb 830 series
sandisk 4gb USB2.0
seagate ST31000524AS 1 TB}

Tijdens de installatie loop ik echter tegen 2 problemen aan:
1. Ik heb geen beeld op de onboard video. Kom niet eens in de bios? Opstarten gaat verder zonder piepje's. Als ik een externe videokaart gebruik geen problemen.
2. ESXI 5.1 herkent mijn onboard netwerkkaart niet. Terwijl ik nergens lees hier dat daar problemen mee zijn.

Heeft iemand dit al eerder meegemaakt of denken jullie ook dat het bord niet in orde is?

[duncanvdlinden]

Ik heb mijn systeempje nu eindelijk compleet en ook al draaien.
De volgende specs:
Jetway NF9E-Q77
Intel i5 3570T
2x GB Ram
Fractal Design R2 Array

Liep tegen enkele problemen aan.
Ten eerste hij sloeg steeds uit, bleek er een kabeltje tussen de CPU fan te zitten
Het is een vrij compact kastje dat ik heb. De thermische beveiliging greep steeds in.
Hij stonk een beetje toen ik de kap open deed dus ik hoop dat ik het mobo niet beschadigd heb.....
Stom foutje...

2e wat niet lekker loopt is via VT-D de 2e Intel NIC (82579LM) door te sturen naar een VM. Deze wordt standaard niet ondersteund onder ESXi. PSOD...
Er is een niet gegarandeerd stabiele driver, maar die maakt mijn andere NIC juist weer onbruikbaar dus dat is ook niet echt een goede optie. Schijnt vaker voor te komen in VMware 5.1.

Daarna nog eens zitten hannesen met de SATA kabels. Deze was niet juist en werd de VM onbereikbaar traag. Heel Windows liep vast. In systemlog van ESXi kon je zien dat hij steeds van SATA modus wisselde. Kabeltje vervangen en dat gaat nu wel perfect.

Baad me alleen nog zorgen over bepaalde syslog meldingen, iemand enig idee of ze acceptabel zijn?
--------------------------------------------------------------------------
2012-11-24T12:59:10.781Z cpu2:5833)WARNING: UserLinux: 1331: unsupported: (void)
2012-11-24T14:27:51.574Z cpu2:5180)WARNING: LinScsi: SCSILinuxQueueCommand:1193:queuecommand failed with status = 0x1056 Unknown status vmhba36:0:0:0 (driver name: ahci) - Message repeated 1 time
2012-11-24T14:27:51.574Z cpu0:4100)ScsiDeviceIO: 2303: Cmd(0x4124007bbec0) 0x85, CmdSN 0xe from world 5180 to dev "t10.ATA_____WDC_WD15EARS2D00Z5B1__________________________WD2DWMAVU2273136" failed H:0x0 D:0x8 P:0x0 Possible sense data: 0x0 0x0 0x0.
2012-11-24T15:35:20.276Z cpu2:12137)WARNING: UserLinux: 1331: unsupported: (void)
--------------------------------------------------------------------------

Iemand die ze ook heeft? Dit is gewoon een lokale harddisk op de SATA poort.
Het is overigens alleen bij het booten van de server.
SATA controller heb ik al op AHCI en RAID modus gehad. Maakt geen verschil.

[ Voor 5% gewijzigd door duncanvdlinden op 24-11-2012 17:03 ]

[jadjong]

Vt-d is in 5.1 niet zo succesvol als 5.0U1, vandaag de psod.

[FireDrunk]

xelnaha schreef op donderdag 22 november 2012 @ 18:31:
Yup,

is niet zo heel moeilijk, heb ook ooit wat handleidingen gebruikt, ff zoeken voor je

gevonden:

dit is voor 3.5, maar zal niet zo heel veel anders zijn voor 5 gok ik

http://www.vm-help.com/esx/esx3i/customize_oem_tgz.php

ESX 3.5 is wezenlijk anders. ESX 5 werkt met VIB of offline bundles, een oem.tar.gz is niet zomaar te importeren.

[duncanvdlinden]

jadjong schreef op zaterdag 24 november 2012 @ 22:32:
Vt-d is in 5.1 niet zo succesvol als 5.0U1, vandaag de psod.

Ja dat las ik ook inderdaad, maar even wachten dan tot ik die 2e NIC kan gaan gebruiken. Hopelijk komen er fixes voor VT-D. Of hopelijk een werkende driver onder ESXi.

Ik ben langzamerhand al mijn disken aan het overzetten naar VMFS5.
Liep wel tegen een beperking aan dat mijn 3TB disk ik 2 VMDK's moest maken omdat er een 2TB limiet is voor VMDK files. Maar het mooie is dat ik deze 2 virtuele disks wil gebruiken in een Linux VM (OpenMediavault), waarbij ik de 2 virtuele disken mooi tot 1 volume kon combineren via LVM.

Overigens zie ik alleen maar vage meldingen in het systeemlog van disks die ik RAW aan spreek, vandaar dat ik alles aan het omzetten ben naar VMFS5.

[Pantagruel]

Verwijderd schreef op zaterdag 24 november 2012 @ 09:36:
Na lang wikken en wegen ben ik ook overgegaan op het samenstellen van een zuinige ESXI machine.
Dit heeft geleid tot de volgende configuratie:

^{be quiet voeding system power 350w 80+
2 x Corsair 2x8GB CMV16gx3m2a1333c9
intel core i5 3350P 3.10 GHZ 6mb box
Intel PCI adapter pro/100gt 1GB
MSI b75ma-p45
samsung SSD 128gb 830 series
sandisk 4gb USB2.0
seagate ST31000524AS 1 TB}

Tijdens de installatie loop ik echter tegen 2 problemen aan:
1. Ik heb geen beeld op de onboard video. Kom niet eens in de bios? Opstarten gaat verder zonder piepje's. Als ik een externe videokaart gebruik geen problemen.
2. ESXI 5.1 herkent mijn onboard netwerkkaart niet. Terwijl ik nergens lees hier dat daar problemen mee zijn.

Heeft iemand dit al eerder meegemaakt of denken jullie ook dat het bord niet in orde is?

De Intel core i5 3350P heeft vlgs de spec's geen graphics on-board en aangezien de B75 chip ook geen graphics doet, lijkt me geen beeld zonder een aparte videokaart dus een normaal gegeven.

De RTL8111E zou het inderdaad moeten doen, heb geen problemen met de combi ESXi 5.0 u1 en de onboard RTL8111E van de Asrock B75 Pro3-M.

Ik heb btw het volgende in gebruik als ESXi 5 bakkie:

#	Product	Prijs	Subtotaal
1	Intel Core i3 2120 Boxed	€ 106,30	€ 106,30
1	Asrock B75 Pro3-M	€ 57,90	€ 57,90
1	Samsung Spinpoint F3 HD103SJ, 1TB	€ 65,-	€ 65,-
1	Corsair Vengeance CML32GX3M4A1600C10	€ 133,50	€ 133,50
1	Intel Postville X25-M SSDSA2MJ080G201 80GB	€ 99,90	€ 99,90
Bekijk collectie Importeer producten		Totaal	€ 462,60

Vraagje aan de echte ESXi guru's al hier.

Wie van jullie heeft wel een slast gehad van disk/corruptie problemen bij een SATA disk die mbv de bekende RDM hack is voor gegeven aan een VM?

Ik vraag dit omdat ik onlangs een tegensputterende 1 TB Samsung had. De Ubuntu VM weigerde hem te mounten en mekkerde minder vrolijk dat de opgegeven omvang en de daadwerkelijke omvang niet overeenkwamen. Vervolgens werdt er richting een verotte part tabel gehint. Een fsck leverde niet het gewenste resultaat op, mount bleef weigeren. Uiteindelijk heeft een resizefs het probleem verholpen., maar je raad het al, het vertrouwen heef teen flinke knauw gehad.

[ Voor 51% gewijzigd door Pantagruel op 26-11-2012 23:54 . Reden: vraag mbt rdm en corruptie ]

[RudolfR]

Ik draai al een tijdje ZFSGuru op ESXi 4.1.
Werkt prima.

Wel met virtual RDMs, physical gaf problemen.
http://kb.vmware.com/selfservice/microsites/search.do?
language=en_US&cmd=displayKC&externalId=1026256

[FireDrunk]

Virtual is eigenlijk gewoon hetzelfde als met VMFS werken. De ESXi kernel handelt alle IO requests zelf af, ipv ze door te geven aan de disk zelf. Je hebt dan dus ook geen SMART.

Physical is een stuk beter (als het werkt) vanwege directere access.

Virtual kan ook slechter tegen bad sectors volgens mij, omdat de timeout van de kernel geld in plaats van de timeout van de disk.

[bsbfx]

jadjong schreef op zaterdag 24 november 2012 @ 01:39:
Bij gebrek aan videokaarten ben ik zelf niet verder gekomen dan twee vm's, dat liep verrassend vloeiend. Het idee was om een desktop en htpc/xbmc vm op dezelfde hardware te draaien.

Mooi om te zien dat het inderdaad werkt.
Zoals je al aangaf zitten er inderdaad wel een paar haken en ogen aan. Ik ga nog eens puzzelen wat dat maakt de keuze van moederbord etc er niet makkelijker op. We hebben weer voldoende stof tot nadenken.

[jadjong]

bsbfx schreef op dinsdag 27 november 2012 @ 13:40:
[...]

Mooi om te zien dat het inderdaad werkt.
Zoals je al aangaf zitten er inderdaad wel een paar haken en ogen aan. Ik ga nog eens puzzelen wat dat maakt de keuze van moederbord etc er niet makkelijker op. We hebben weer voldoende stof tot nadenken.

Neem iets met een high end chipset van intel, daar heb je de meeste kans mee. Ik heb een MSI x58 en Supermicro x9 (c602), beide doen vloeiend passtrough. Als je iets nieuws wil bouwen raad ik de x9srl(f) aan. In plaats van de populaire pci-e x16/x1 combi heeft deze enkel x8 en x4 sloten. De snelheid van een enkel x16 slot gebruik je in de praktijk vrij weinig, je hebt meer aan twee x8 sloten voor passtrough. Verder heeft het bordje 10 onboard sata (6 werken met passtrough), ipmi en 8 geheugenslots.

Dit klinkt niet als een zuinige (esx)server, maar in mijn geval vervangt het drie apparaten die zo goed als altijd aan staan. Daarnaast heb ik nu een snelle link tussen storage-server en werkstation, met gescheiden apparaten had ik 10Gbit of infiniband apparatuur aan moeten schaffen om hetzelfde resultaat te halen. De kosten hiervan zijn flink hoger dan het extra stroomverbuik in de huidige oplossing.

[Pantagruel]

RudolfR schreef op dinsdag 27 november 2012 @ 08:17:
Ik draai al een tijdje ZFSGuru op ESXi 4.1.
Werkt prima.

Wel met virtual RDMs, physical gaf problemen.
http://kb.vmware.com/selfservice/microsites/search.do?
language=en_US&cmd=displayKC&externalId=1026256

FireDrunk schreef op dinsdag 27 november 2012 @ 09:44:
Virtual is eigenlijk gewoon hetzelfde als met VMFS werken. De ESXi kernel handelt alle IO requests zelf af, ipv ze door te geven aan de disk zelf. Je hebt dan dus ook geen SMART.

Physical is een stuk beter (als het werkt) vanwege directere access.

Virtual kan ook slechter tegen bad sectors volgens mij, omdat de timeout van de kernel geld in plaats van de timeout van de disk.

Het is al weer even geleden dat ik de rdm mapping heb aangemaakt dus ik ben me niet zeker of ik t mbv -r of -z heb gedaan. heb ook geen idee of je dat post factum nog kunt achterhalen, de shell history van esxi install rijkt niet zo ver terug vrees ik (moet ik nog controleren).

[FireDrunk]

Werkt SMART? dan heb je physical, anders niet. Simpel

[Pantagruel]

FireDrunk schreef op dinsdag 27 november 2012 @ 16:43:
Werkt SMART? dan heb je physical, anders niet. Simpel

Blergh , and all this time the answer was staring in my face


smartctl -i /dev/sdb
smartctl 5.41 2011-06-09 r3365 [x86_64-linux-3.2.0-23-generic] (local build)
Copyright (C) 2002-11 by Bruce Allen, http://smartmontools.sourceforge.net

Vendor: VMware
Product: Virtual disk
Revision: 1.0
User Capacity: 1,000,204,886,016 bytes [1.00 TB]
Logical block size: 512 bytes
Device type: disk
Local Time is: Tue Nov 27 20:02:36 2012 CET
Device does not support SMART


Da's dus een nee

[FireDrunk]

Dan heb je dus een kleine kans dat bij een bad sector je controller en VM over de flos gaan.
VMware heeft de vervelende eigenschap om je VM te pauzeren als er storage problemen zijn.

Via advanced settings zijn die timeouts wel op te rekken, maar of het 100% werkt.

[ Voor 18% gewijzigd door FireDrunk op 27-11-2012 20:10 ]

[Pantagruel]

FireDrunk schreef op dinsdag 27 november 2012 @ 20:10:
Dan heb je dus een kleine kans dat bij een bad sector je controller en VM over de flos gaan.
VMware heeft de vervelende eigenschap om je VM te pauzeren als er storage problemen zijn.

Via advanced settings zijn die timeouts wel op te rekken, maar of het 100% werkt.

Yup zou best eens kunnen, was daarnet bezig om een bak data over te zetten, de snelheid liep vanuit t niets terug tot tergend langzaam, klonk er kort een 'krakend' geluidje en ging de actie weer verder. In ieder geval ga ik hem omwisselen voor een andere 1 TB Samsung of een 1.5 TB Samsung die ik in een andere bak heb zitten. (heb de schijf al eens eerder getest op 'rot' maar bleek toen ok te zijn).

[ Voor 8% gewijzigd door Pantagruel op 27-11-2012 20:21 ]

[Deveon]

Hallo Allemaal, het is alweer een tijdje geleden dat ik actief was binnen dit topic. Blijkbaar heb ik minder tijd beschikbaar om met mijn nieuwe ESX te spelen als ik had verwacht.

Ik heb de volgende server draaien:

#	Product	Prijs	Subtotaal
1	Intel Core i5 3550 Boxed	€ 179,55	€ 179,55
1	Intel DZ77BH-55K	€ 163,-	€ 163,-
4	Seagate SV35.5 ST2000VX002, 2TB	€ 124,12	€ 496,48
1	Cooler Master Silencio 550	€ 67,90	€ 67,90
2	Transcend 8GB DDR3 Dual/Triple Channel Kit	€ 31,08	€ 62,16
1	Intel RAID Controller SASUC8I	€ 144,76	€ 144,76
1	Cooler Master Silent Pro M600	€ 109,-	€ 109,-
1	Samsung 830 series SSD 64GB	€ 58,90	€ 58,90
Bekijk collectie Importeer producten		Totaal	€ 1.281,75

Momenteel draai ik hierop het volgende:

- Solaris (raidcontroller in passthrough)
- Server 2008 R2
- Server 2012
- CentOS met Samba voor shares
- Windows 8
- ESX1 (jup, esx in esx)
- ESX2
- VMware Vcenter Server Appliance

Dit werkt allemaal goed (al hoewel ik vaak krap zit met ram, wat ik maar blijf toevoegen), maar helaas vind ik mijn machine nog wat roemerig (staat op de slaapkamer). Momenteel gebruik ik de CM Silencio 550 als kast. Hebben jullie een idee hoe ik mijn systeem fluister stil kan maken?

Waar ik zelf aan zat te denken was het downspinnen van disken, maar dat schijnt solaris niet te ondersteunen en volgens mij wordt er tijdens idle daarvoor teveel geschreven/gelezen. Of anders overgaan op semi passieve koeling aangezien mijn cpu maximaal maar voor 10-20% benut wordt.


Daarnaast heb ik ook nog de volgende voeding liggen:

#	Product	Prijs	Subtotaal
1	Antec Earthwatts EA-380D Green	€ 42,-	€ 42,-

Zou dit een betere keus zijn in plaatsen van de Coolermaster betreffend verbruik en is deze voeding sterk genoeg voor mijn server?

[ Voor 30% gewijzigd door Deveon op 28-11-2012 09:12 ]

[-The_Mask-]

Ja en ja.

[Deveon]

-The_Mask- schreef op woensdag 28 november 2012 @ 09:23:
Ja en ja.

Kort maar krachtig neem ik aan...

Zou deze wijzigen ook daadwerkelijk mijn server stiller maken of blijf ik dit houden vanwege de 4 draaiende disken?

[magic_japie]

Werkt VT-d ook goed en dus passthrough van video naar een van je vm's?
Je config staat me wel aan namelijk

[Deveon]

VT-d werkt perfect met de raidcontroller. Het doorgeven van de videokaart heb ik helaas opgegeven omdat ik hier niet verder mee kwam, ondanks dat iemand anders het wel gelukt is met dezelfde videokaart.

Momenteel ben ik bezig om VCP5 gecertificeerd te worden en misschien ga ik daarna nog spelen met VT-d icm videokaart, maar eerst andere projectjes.

Daarnaast zijn er op mijn huidige setup toch puntjes die ik zelf anders had gedaan als ik het via webshops had besteld. Op het moederbord, raidcontroller (2dehands), disken (2dehands) en kast (had ik nog) is genoeg te besparen om een grotere (of meerdere) ssd('s) te nemen. Daarnaast heb ik de fout gemaakt om 2x 4GB (+1x 8GB) erin te zetten. De volgende upgrade gaat worden om 4x 8 GB erin te zetten, vooral vanwege de virtuele hypervisors die draaien.

TIP: Voor de Windows 8 gebruikers: Via VMware Vcenter Server Appliance (werkt alleen met trial op je host) is het wél mogelijk om de console te openen via Vsphere! Anders ben je aangewezen op VMware Workstation.
En als je dan eerst de Consumer Preview of Release Candidate installeerd dan kan je deze legaal upgraden voor 30 euro naar Windows 8 Proffesional.

[meraki]

Hallo, ik volg het topic al een tijdje. Graag zou ik mijn toekomstige ESXi Server laten keuren. Liefst zou hij out of the box moeten werken met ESXi 5.1 en hardware-doorgifte via VT-d moeten ondersteunen.

Doeleind is een ZFS-opslagsysteem, een Debian server met services en een experimentele Windows Server 2012.

#	Product	Prijs	Subtotaal
1	Intel Xeon E3-1230V2 Boxed	€ 205,80	€ 205,80
1	Supermicro X9SCM-IIF	€ 206,21	€ 206,21
4	Western Digital Red WD30EFRX, 3TB	€ 142,99	€ 571,96
2	Kingston KVR1333D3E9SK2/16G	€ 120,80	€ 241,60
2	IBM ServeRAID M1015 SAS/SATA Controller for System x	€ 89,99	€ 179,98
1	Samsung 830 series 256GB	€ 159,95	€ 159,95
Bekijk collectie Importeer producten		Totaal	€ 1.565,50

Alle VMs zou ik willen opslagen op de SSD die op de onboard SATA-controller van het moederbord is aangesloten.

Alvast bedankt voor de feedback.

[FireDrunk]

Waarom 2 M1015's voor 4 schijven?

[meraki]

FireDrunk schreef op donderdag 29 november 2012 @ 13:45:
Waarom 2 M1015's voor 4 schijven?

Ik plan op termijn 16 schijven hierin te steken voor ZFS-storage. De M1015 heeft 2 SAS-poorten waaraan ik per poort 4 SATA-schijven kan hangen, vandaar. Dank voor je opmerkzaamheid

[C00KW4US]

Jullie moeten Hyper-V 3 (server 2012) eens proberen
* C00KW4US rent weg.

[Kavaa]

Deveon schreef op woensdag 28 november 2012 @ 08:36:
Hallo Allemaal, het is alweer een tijdje geleden dat ik actief was binnen dit topic. Blijkbaar heb ik minder tijd beschikbaar om met mijn nieuwe ESX te spelen als ik had verwacht.

Ik heb de volgende server draaien:

#	Product	Prijs	Subtotaal
1	Intel Core i5 3550 Boxed	€ 179,55	€ 179,55
1	Intel DZ77BH-55K	€ 163,-	€ 163,-
4	Seagate SV35.5 ST2000VX002, 2TB	€ 124,12	€ 496,48
1	Cooler Master Silencio 550	€ 67,90	€ 67,90
2	Transcend 8GB DDR3 Dual/Triple Channel Kit	€ 31,08	€ 62,16
1	Intel RAID Controller SASUC8I	€ 144,76	€ 144,76
1	Cooler Master Silent Pro M600	€ 109,-	€ 109,-
1	Samsung 830 series SSD 64GB	€ 58,90	€ 58,90
Bekijk collectie Importeer producten		Totaal	€ 1.281,75

Momenteel draai ik hierop het volgende:

- Solaris (raidcontroller in passthrough)
- Server 2008 R2
- Server 2012
- CentOS met Samba voor shares
- Windows 8
- ESX1 (jup, esx in esx)
- ESX2
- VMware Vcenter Server Appliance

Dit werkt allemaal goed (al hoewel ik vaak krap zit met ram, wat ik maar blijf toevoegen), maar helaas vind ik mijn machine nog wat roemerig (staat op de slaapkamer). Momenteel gebruik ik de CM Silencio 550 als kast. Hebben jullie een idee hoe ik mijn systeem fluister stil kan maken?

Waar ik zelf aan zat te denken was het downspinnen van disken, maar dat schijnt solaris niet te ondersteunen en volgens mij wordt er tijdens idle daarvoor teveel geschreven/gelezen. Of anders overgaan op semi passieve koeling aangezien mijn cpu maximaal maar voor 10-20% benut wordt.


Daarnaast heb ik ook nog de volgende voeding liggen:

#	Product	Prijs	Subtotaal
1	Antec Earthwatts EA-380D Green	€ 42,-	€ 42,-

Zou dit een betere keus zijn in plaatsen van de Coolermaster betreffend verbruik en is deze voeding sterk genoeg voor mijn server?

Kijk eens naar de Fractal Design reeks die hebben hun kasten wel goed gedempt zeg maar.
Heb z'n kastje wel eens weggezet met 1 HDD maar weet niet hoe het met meerdere zit...

[Deveon]

djkavaa schreef op donderdag 29 november 2012 @ 15:19:
[...]


Kijk eens naar de Fractal Design reeks die hebben hun kasten wel goed gedempt zeg maar.
Heb z'n kastje wel eens weggezet met 1 HDD maar weet niet hoe het met meerdere zit...

Ik heb momenteel een Silencio 550 "..De geluidsisolatie van de Silencio werkt uitstekend: we hebben in de recente geschiedenis geen stillere kasten in ons testlab gehad..", dus ik vermoed niet dat een andere kast voor mij de oplossing is.

Ik denk dat ik meer op zoek moet naar iets als dit plus een cpu koeler. Nog aanraders voor 1155?

[duncanvdlinden]

Iemand enig idee hoe ik hier vanaf kom?
-------------------------------------
2012-11-29T17:22:41.565Z cpu0:5176)WARNING: LinScsi: SCSILinuxQueueCommand:1193:queuecommand failed with status = 0x1056 Unknown status vmhba37:0:0:0 (driver name: ahci) - Message repeated 1 time
2012-11-29T17:22:41.565Z cpu0:5176)ScsiDeviceIO: 2303: Cmd(0x4124007f1700) 0x85, CmdSN 0xa from world 5176 to dev "t10.ATA_____WDC_WD30EZRX2D00MMMB0_________________________WD2DWCAWZ1355524" failed H:0x0 D:0x8 P:0x0 Possible sense data: 0x0 0x0 0x0.
2012-11-29T17:52:42.936Z cpu1:5176)WARNING: LinScsi: SCSILinuxQueueCommand:1193:queuecommand failed with status = 0x1056 Unknown status vmhba37:0:0:0 (driver name: ahci) - Message repeated 62 times
2012-11-29T17:52:42.936Z cpu3:5829)ScsiDeviceIO: 2303: Cmd(0x4124007c96c0) 0x85, CmdSN 0xd from world 5176 to dev "t10.ATA_____WDC_WD30EZRX2D00MMMB0_________________________WD2DWCAWZ1355524" failed H:0x0 D:0x8 P:0x0 Possible sense data: 0x0 0x0 0x0.
2012-11-29T17:52:43.054Z cpu1:8930)ScsiDeviceIO: 2303: Cmd(0x4124007f1500) 0x2a, CmdSN 0x800e0028 from world 8930 to dev "t10.ATA_____WDC_WD30EZRX2D00MMMB0_________________________WD2DWCAWZ1355524" failed H:0x0 D:0x8 P:0x0 Possible sense data: 0x0 0x0 0$
-------------------------------------
Vreemdgenoeg heb ik dit alleen op me spinnende disken. Me SSD niet.
Ik heb al volgens deze guide http://kb.vmware.com/self...playKC&externalId=1033665 VAAI uitgezet (en gereboot)
Ook heb ik al in het Bios VT-D uitgezet. (Sommigen hielp dit ook)

[jadjong]

Wat is het probleem wat je ondervindt? (naast een steeds vollere errorlog)

[duncanvdlinden]

jadjong schreef op donderdag 29 november 2012 @ 20:14:
Wat is het probleem wat je ondervindt? (naast een steeds vollere errorlog)

Eigenlijk niets, maar het stelt me toch niet gerust als ik niet precies weet wat het betekend. Ik heb het inmiddels opgelost door te downgraden naar ESXi 5.0 U1. Nu kan ik ook VT-D gebruiken zonder een PSOD

[thof]

C00KW4US schreef op donderdag 29 november 2012 @ 14:57:
Jullie moeten Hyper-V 3 (server 2012) eens proberen
* C00KW4US rent weg.

* thof roept SaturN terug.
Nou, ik zit daar anders wel aan te denken maar ben mij nog verder in de materie aan het verdiepen. Een pro is bijvoorbeeld dat je niet zit met het 32GB geheugen limiet van ESXi (free). Een con is dat het draaien van linux/unix/solaris systemen volgens mij wat minder goed gaat, een all-in-one setup wordt dan wat lastiger (want ik wil wel graag ZFS) Meer mensen al wezen stoeien met Hyper-V 3.0?

Hyper-V 3.0 kan ook VM's kwijt op SMB-shares, mits het de meest recente versie van het SMB-protocol is aangezien die onder handen is genomen.

[magic_japie]

De laatste dagen heb ik ook wat huiswerk gedaan, maar het valt niet mee om te vinden mbt de eisen die ik heb.

#	Product	Prijs	Subtotaal
1	Intel Xeon E3-1220L Tray	€ 186,30	€ 186,30
1	Intel DZ77BH-55K	€ 167,-	€ 167,-
1	Kingston DataTraveler Micro 16GB Blauw	€ 13,90	€ 13,90
1	Cooler Master Hyper 412S	€ 30,99	€ 30,99
4	Transcend 8GB DDR3 Dual/Triple Channel Kit	€ 31,08	€ 124,32
1	IBM ServeRAID M1015 SAS/SATA Controller for System x	€ 89,99	€ 89,99
1	be quiet! Pure Power L7 300W	€ 37,45	€ 37,45
1	Samsung 830 series SSD 128GB	€ 91,90	€ 91,90
Bekijk collectie Importeer producten		Totaal	€ 741,85

Mobo moet voldoen aan:
- VT-D support
- HDMI
- RAID 0,1,,5,10 hopende dat ESX dit accepteert
- liefst onboard grafische kaart, geen noodzaak
- Intel of Realtek chipset ESX compatible ( heb nog een intel NIC liggen voor passthrough)
- zo zuinig mogelijk
- compatible met een intel E3 Xeon 1220L processor of andere zuinige processor.

Ik heb er een raid controller bijgezet omdat ik niet weet of ESX de onboard raid controller accepteert.
De reden is om mijn 2x 2TB en 2x 1TB als storage te gaan gebruiken en de SSD als VMware opslag.
ESX wil ik booten vanaf de USB stick. De diskspace is nogal overkill, maar kan geen kwaad.

Het enige wat ik nog zoek is een geschikte kast voor mijn in tv-kast. max 43 cm breed en 18 cm hoog.

Mijn bedoeling is om de huidige VM's (freenas kan evt weg, Windows 2003/2008 server 3x) te behouden en daarbij wat test vm;s te draaien.
Merendeel van de tijd staat de server idle te draaien, dus veel processorkracht lijkt me niet nodig.
Daarbij wil ik naar één nieuw te bouwen VM (windows 7 host) de grafischkaart passthrough maken, zodat ik deze kan aansluiten op mijn tv via HDMI.
Een casefan erin plaatsen extra is geen probleem. De kans is groot, vanwege de warmte, dat de klep van de behuizing er af blijft. Dit heb ik momenteel ook.

Zie ik nog iets gruwelijk over het hoofd of klopt er technisch het eea niet?
Het liefst had ik een goedkoper mobo gezien, maar op de MSI en Asrocks die hier veel verkocht zijn zitten mijns inziens haken en ogen.

[FireDrunk]

Gpu passthrough is amper mogelijk onder ESX dus lees je goed in voor je begint.
Die controller is top voor ZFS maar magertjes voor VMFS...
Hij doet ook geen raid5...

[ Voor 35% gewijzigd door FireDrunk op 02-12-2012 09:21 ]

[magic_japie]

Volgens de specs op de intel site wel Raid5.
Kan ik altijd de onboard raid-controller gebruiken in ESX als deze gesupport wordt?
Zo min mogelijk extra kaarten erin, maar als het mobo onzuinig is en met een zuinige en extra kaartje kan het wel, is dat ook prima

Ik zag bij een paar tweakers dat GPU-passthrough gelukt is, alleen hun hardware was voor mij nogal overkill of hadden niet de eisen die ik er aan stel.
Voordat ik t zooitje koop, wil ik wel enige "zekerheid" dat GPU passthrough gaat werken op de hardware.

[FireDrunk]

Je kan de controller gebruiken ja, maar niet de RAID functionaliteit. Die werkt niet in ESXi.
En die M1015 doet geen RAID5, je onboard wel.

[magic_japie]

Voor extra info over ESX 5.1 etc:
http://tinkertry.com/category/virtualization/esxi/

[nickb90]

Na het doorlezen van dit topic heb ik ook maar is een ESXi server samengesteld. De bedoeling is om hier 4 a 5 machine's op te draaien waarvan 1 windows 2008 server en de rest linux servertjes. Ik kan alleen niet vinden of de onboard NIC en de RAID werkt? Ik wil namelijk een RAID10 draaien. zie ik verder nog iets over het hoofd? Want dit is de eerste ESXi server die ik samen gesteld heb..

#	Product	Prijs	Subtotaal
1	Intel Core i5 2500 Boxed	€ 190,90	€ 190,90
1	Intel DZ77BH-55K	€ 167,-	€ 167,-
4	Western Digital Blue WD10EALX, 1TB	€ 66,50	€ 266,-
1	Antec Three Hundred Two	€ 57,95	€ 57,95
2	G.Skill F3-10666CL9S-8GBXL	€ 31,-	€ 62,-
1	Super Flower Golden Green SF-650P14XE	€ 105,65	€ 105,65
Bekijk collectie Importeer producten		Totaal	€ 849,50

[FireDrunk]

Je CPU is wat verouderd, waarom geen Ivy Bridge? Een i5-3550 is iets sneller, en iets zuiniger.
Je moederbord heeft een 82579V controller, die werkt out-of-the-box niet met ESXi, maar is door middel van een VIB install wel te doen. Even in dit topic speuren, en je vind het wel.

Waarom 4 disks van 1TB? Dat kost heel veel stroom. Zuiniger (en dus goedkoper) is 2 x 2TB of 2 x 3TB.

Wil je RAID draaien?Lezen.... Waarom RAID10? Is het niet beter om 1 SSD en 1 Data disk te hebben? Mocht er niets gebeuren op je server, kunnen de disks in spindown, en het booten gaat lekker snel.

Ook zou ik 16GB kitjes nemen, daardoor is upgraden makkelijker.

Ook is een Z77 bord zwaar overkill, want overclocken op een ESXi machine lijkt me niet verstandig...

Een B75, Q77, of H77 bord lijkt mij beter.
De voeding die je hebt is ook _veel_ te zwaar. Met zo'n voeding kan je een SLI/CF setup van prik voorzien.

300W is meer dan genoeg.

Tips:
pricewatch: Corsair Vengeance CML16GX3M2A1600C10
pricewatch: Seasonic G-Serie 360Watt
pricewatch: MSI B75MA-P45
pricewatch: Samsung 830 series SSD 128GB
pricewatch: Intel Core i5 3550 Boxed

[ Voor 32% gewijzigd door FireDrunk op 02-12-2012 12:25 ]

[nickb90]

FireDunk bedankt voor je uitgebreide feedback! Wat betreft de schijven had ik nog niet over nagedacht. Ga ik even naar kijken wat ik daar het beste mee kan doen.

CPU dacht ik al een zuinige voor te hebben.. Toch niet! Ga hem gelijk veranderen.

Moederbord was gekozen i.v.m. de hoeveelheid aansluitingen voor de hardeschijven. Misschien is dat dus niet meer nodig. Zal is gaan zoeken naar betere alternatieven.

Voeding ga ik ook aanpassen! Dacht kan beter genoeg hebben dan te weinig Zet normaal "game pc's" in elkaar waardoor ik nogal een overkill had genomen. Zal er een kleinere voeding inzetten.

Bedankt!


Edit
Ik zie dat je net je post heb aangepast met linkjes. Helemaal geweldig! Ga er gelijk naar kijken. Thanks!

[ Voor 9% gewijzigd door nickb90 op 02-12-2012 12:28 ]

[FireDrunk]

Post gerust nog een keer je lijstje, dan kijken we nog een keer

[magic_japie]

combi's voor GPU passtrough in een sheet en hardware wat goed werkt in ESX...

https://docs.google.com/s...V09lNWxfODd1alRUTlE#gid=0

[nickb90]

FireDunk ik heb je configuratie tips eigenlijk allemaal 1 op 1 overgenomen.. Ik kan eigenlijk geen reden vinden waarom ik dit niet zou doen. De VM's passen allemaal op de SSD (lekker snel met booten idd) en dan de data sla ik op op 1 HDD, de andere HDD gebruik ik dan als interne backup schijf. Deze schijven laat ik down spinnen als ze niets te doen hebben wat het weer extra zuinig maakt.

Alleen kan ik -weer- niet vinden of de onboard NIC ondersteund word. Ik google wel op "MSI B75MA-P45 esxi + onboard nic supported", maar daar krijg ik geen antwoord. Heeft er iemand een goede site waar dit wel opstaat?

De nieuwe configuratie:

#	Product	Prijs	Subtotaal
1	Intel Core i5 3550 Boxed	€ 185,-	€ 185,-
1	MSI B75MA-P45	€ 51,95	€ 51,95
2	Western Digital RE4, 2TB	€ 169,-	€ 338,-
1	Antec Three Hundred Two	€ 57,95	€ 57,95
1	Corsair Vengeance CML16GX3M2A1600C10	€ 65,55	€ 65,55
1	Seasonic G-Serie 360Watt	€ 65,90	€ 65,90
1	Samsung 830 series SSD 128GB	€ 91,90	€ 91,90
Bekijk collectie Importeer producten		Totaal	€ 856,25

[FireDrunk]

Dat bord heeft een 8111E, en zoals je hier: abusimbal in "Zuinige ESXi Server" ziet, werkt dat gewoon.

Waarom RE4 schijven? Die zijn takke duur, en speciaal bedoeld voor 24/7 gebruik in RAID array's.
Neem liever de Samsung F4EG 2TB of Western Digital Red's, hoewel die ook redelijk duur zijn in verhouding tot waar jij ze voor gaat gebruiken.

Verder prima!

[punisher007]

Ik ben van plan om 2 test servers te kopen. Ik ben van plan om deze te gebruiken voor Hyper-V, ESXi en XenServer op verschillende momenten.

Ik zal waarschijnlijk testomgevingen gaan bouwen met redelijk wat virtuele machines. Vooral Microsoft omgevingen met AD, SQL, System Center, Exchange, Sharepoint, windows clients etc.

Op basis van dit topic ben ik qua basisconfiguratie hierop uitgekomen, kan iemand eens kijken of er nog wat mogelijke verbeterpunten zijn ? Ben bereid om ook meer te betalen indien dit nuttig is.

#	Product	Prijs	Subtotaal
1	Intel Core i5 3570 Boxed	€ 186,50	€ 186,50
1	Gigabyte GA-H77M-D3H	€ 78,-	€ 78,-
1	Fractal Design ARC MINI	€ 74,10	€ 74,10
1	Corsair Vengeance CMZ32GX3M4X1600C10	€ 133,35	€ 133,35
1	Corsair Builder CX430 V2	€ 42,95	€ 42,95
Bekijk collectie Importeer producten		Totaal	€ 514,90

[ Voor 3% gewijzigd door punisher007 op 02-12-2012 17:16 ]

[FireDrunk]

Storage?

[punisher007]

Qua storage heb ik nog SSD's en sata disks liggen die ik ga hergebruiken Gaat me meer om de combinaties van moederbord, cpu, geheugen en voeding. SSD en aantal disks is minimaal waardoor dit weinig impact zou mogen hebben op de voeding.

[FireDrunk]

F5 werkt beter...

[ Voor 93% gewijzigd door FireDrunk op 03-12-2012 09:43 ]

[Deveon]

Ik heb zelf de Intel DZ77BH-55K draaien en is zeer eenvoudig om de netwerkdriver aan de praat te krijgen. Mocht er hier een vraag over zijn stuur me dan ff een DM. Daarnaast adviseer ik zelf wel om een ander moederbord te nemen aangezien die onnodig duur is en de tweede raidcontroller die erop zit werkt niet (niet in esx én niet in passthrough)!

[Valkyre]

Een tijd geleden heb ik de onderstaande configuratie al eens gepost over RDM's e.d.

#	Product	Prijs	Subtotaal
1	Intel Core i3 2100 Boxed	€ 103,70	€ 103,70
1	MSI H67MS-E23 (B3)	€ 0,-	€ 0,-
4	Western Digital Green WD20EARS, 2TB	€ 99,95	€ 399,80
1	Corsair XMS CMX8GX3M2A1333C9	€ 31,49	€ 31,49
1	Huntkey Jumper 300G	€ 64,40	€ 64,40
1	Kingston SSDNow V-Series SATA2 2.5 64GB	€ 138,-	€ 138,-
Bekijk collectie Importeer producten		Totaal	€ 737,39

En ik heb nog een 320 gig laptop schijf toegevoegd....

RDM's maken was een eitje, maar het stroom verbruik ben ik iets minder blij mee.

Voordat ik virtueel ging stond er alleen Windows 2008 R2 op en met gedownspinde schijven verbruikte hij dan 28 watt.. wat ik erg netjes vond.

Nu heb ik ESX geinstalleerd, stuk of 5 vm'tjes draaien:
1x DC win2k8 r2
1x File server win2k8 r2 (hier de 4 WD's naar toe ge RDM't)
tevens sabnzdb, dlna server, Teamspeak.
1x Vcenter appliance Suse

En dan nog wat linux en windows prut wat niet veel doet gewoon om mee te spelen.

Nu dezelfde configuratie met alleen dus een 2.5 inch laptop schijf toegevoegd verbruik ik 40 watt in rust en naar ik denk gedownspinde schijven.
En piek iets van 50 watt.

Power management heb ik op Balanced staan, maar ik heb het vermoeden dat mijn disken niet echt downspinnen. (ik hoor ze namelijk ook niet down gaan)
Heeft er iemand nog tips om hem zuiniger te maken? ik kan hier wel meeleven maar het zou leuk zijn als het beter kan

Op termijn wil ik waarschijnlijk nog de SSD vervangen door:
http://tweakers.net/price...m4-ct256m4ssd2-256gb.html
en dan de kingston 60 gig als inkomende download disk behouden oid.

[ Voor 7% gewijzigd door Valkyre op 05-12-2012 08:02 . Reden: v4 vervangen door m4 ]

[abusimbal]

@Gohan-san: Die Crucial V4 heeft een (zeer) lage IOPS (voor een SSD), waarom niet een M4 of een Samsung 830 ?

[FireDrunk]

@Gohan-san: Je moet spindown daarna wel weer aanzetten in de VM die de disk gebruikt natuurlijk

[Valkyre]

@abusimbal ah daar had ik nog niet naar gekeken ging meer over een 256 gig SSD my bad
(en de link even gefixed naar de m4)

@Firedruk, dat heb ik ook gedaan op 30 minuten staat het en ik heb ook het performance log in de gaten gehouden of er niet toch nog activiteit word uitgevoerd op dat volume.

[ Voor 7% gewijzigd door Valkyre op 05-12-2012 08:03 ]

[FireDrunk]

Hmm, hoe heb je de RDM aangemaakt? Physical of Virtual?

[Valkyre]

Yep physical
ik heb een raid 5 volume over de 4 disken.

[ Voor 50% gewijzigd door Valkyre op 05-12-2012 10:49 ]

[FireDrunk]

Hmm, vreemd, bij mij werkte dit wel geloof ik. Kan je eens kijken of je APM instellingen kan uitlezen?

[Valkyre]

ehm APM instelling? waar vind ik die? en met welke tooltje kan ik ze vinden?

ik heb weleens speedfan aangeslingerd om te kijken of ik nog temps kon uitlezen, maar toen liep mijn host vast waardoor ik moest resetten... en vervolgens weer 4 dagen moest rebuilden

[FireDrunk]

Oh, dat klinkt sowieso niet goed...

Random google resultaat:
http://disablehddapm.blog...-disk-drive-advanced.html

[Valkyre]

hmm 64 bits os is niet gesupport, maar wanneer ik hem onder compatibilteit modus installeer doet ie het wel.
Vanavond of morgen (sinterklaas ) zal ik eens kijken of ik meer kan uitlezen met HDparm.

[magic_japie]

Ik heb nogmaals enige topics bekeken en ook de pass-through website https://docs.google.com/s...V09lNWxfODd1alRUTlE#gid=0

Het nadeel van de sheet is dat er wat oudere mobo's op staan voor vt-d van GPU's of die niet in mijn straatje passen.

Om de aanschafkosten in perken te houden heb ik tot heden gekozen voor:

#	Product	Prijs	Subtotaal
1	Intel Core i5 3550 Boxed	€ 183,95	€ 183,95
1	MSI B75MA-P45	€ 54,95	€ 54,95
1	Kingston DataTraveler Micro 16GB Blauw	€ 13,90	€ 13,90
1	Cooler Master Hyper 412S	€ 32,95	€ 32,95
2	Corsair Vengeance CML16GX3M2A1600C10	€ 64,75	€ 129,50
1	be quiet! Pure Power L7 300W	€ 37,45	€ 37,45
1	Samsung 830 series SSD 128GB	€ 91,90	€ 91,90
Bekijk collectie Importeer producten		Totaal	€ 544,60

Ik wil er alleen een raid-controller bij. Softraid onder Freenas kan, maar ik ben geen voorstander van een VM-softraid opstelling.
Ik heb meer vertrouwen in de rhardwarematige raidcontroller. Snelheid vind ik minder boeiend mbt kopieeracties.
Mijn idee is om de 4 3,5 inch schijven (2x 2TB en 2x 1TB) aan de controller te hangen onder liefst Raid 5. Dan heb ik een grote dataopslag voor alle films, muziek, studie etc etc. Dat is dan de NAS.
Hiermee hoop ik de configuratie zo eenvoudig mogelijk te houden.

In eerste instantie de Xeon E3 1220 die extra zuinig is, Toch maar gekozen voor de i5 3550. Een goed idee mbt zuinigheid? Nu kan ik wel 4 cores verdelen over de VM's ipv de 2 cores van de Xeon E3 1220.

Alleen wordt het nog zoeken naar een geschikte videokaart voor pass-through. Ik heb wel wat gevonden, maar niet icm dit mobo.

[Pantagruel]

magic_japie schreef op donderdag 06 december 2012 @ 21:58:
Ik heb nogmaals enige topics bekeken en ook de pass-through website https://docs.google.com/s...V09lNWxfODd1alRUTlE#gid=0

Het nadeel van de sheet is dat er wat oudere mobo's op staan voor vt-d van GPU's of die niet in mijn straatje passen.

Om de aanschafkosten in perken te houden heb ik tot heden gekozen voor:
[table ...snipzzz...

Ik wil er alleen een raid-controller bij. Softraid onder Freenas kan, maar ik ben geen voorstander van een VM-softraid opstelling.
Ik heb meer vertrouwen in de rhardwarematige raidcontroller. Snelheid vind ik minder boeiend mbt kopieeracties.
Mijn idee is om de 4 3,5 inch schijven (2x 2TB en 2x 1TB) aan de controller te hangen onder liefst Raid 5. Dan heb ik een grote dataopslag voor alle films, muziek, studie etc etc. Dat is dan de NAS.
Hiermee hoop ik de configuratie zo eenvoudig mogelijk te houden.

In eerste instantie de Xeon E3 1220 die extra zuinig is, Toch maar gekozen voor de i5 3550. Een goed idee mbt zuinigheid? Nu kan ik wel 4 cores verdelen over de VM's ipv de 2 cores van de Xeon E3 1220.

Alleen wordt het nog zoeken naar een geschikte videokaart voor pass-through. Ik heb wel wat gevonden, maar niet icm dit mobo.

Waarom hardware RAID als je ook een VM op kunt zetten waaraan je een relatief domme controller (IBM M1015 bijv.) door kunt geven mbv Vt-d en dan ZFS het 'raid' werk laten doen. HyperBart heeft hier op Tweakers een blog mbt een all-in-one NAS/SAN van gemaakt, of Google er ff op los.

[magic_japie]

Ik kan voor een acceptabel bedrag een Areca controller 1220 overnemen.
Eerst zal ik het topic van Hyperbart doorlezen voordat ik ja zeg die de raid-controller.

Bedankt iig.

[Pantagruel]

magic_japie schreef op vrijdag 07 december 2012 @ 13:53:
Ik kan voor een acceptabel bedrag een Areca controller 1220 overnemen.
Eerst zal ik het topic van Hyperbart doorlezen voordat ik ja zeg die de raid-controller.

Bedankt iig.

Psst 1222x (extern) incl. kabels overnemen ligt hier min of meer stof te verzamelen

Is idd een leuke RAID kaart, maar realiseer je wel dat je dan 'enterprise' hdd's aan zult moeten schaffen ivm TLER.

[Deveon]

De i3550 is een relatief zuinige processor. Ik kan me herinnener dat in dit topic, niet zo lang geleden, een post te vinden was met een systeem dat slechts 20 watt nodig had met deze proc.

Voor ZFS zou ik raid-z wel willen afraden, dan heb je namelijk maar de iops van een enkele disk. bron. Als je daar je VM's op wil gaan zetten dan gaat dat zeker ten koste van je performance. Mirror is dan een betere oplossing, alleen je halveerd wel je capaciteit.

Zelf draai ik 4x2 tb in mirror + mirror (mirror's dan weer gestripped) op Solaris 11. FreeNAS schijnt qua performance nogal tegen te vallen al hoewel het inrichten ervan erg makkelijk is.

edit: Hou wel rekening mee dat raidcontroller wel ondersteund wordt. Anders ben je misschien beter af met een simpele LSI SAS raidcontroller (+ kabels voor sas -> sata)

[ Voor 20% gewijzigd door Deveon op 07-12-2012 14:19 ]

[FireDrunk]

RAIDZ kan prima, mits je een SSD als SLOG gebruikt. Dan is het prima te gebruiken voor VM's.

Ik ben degene met de i5-3550 En die doet inderdaad (met een goed bord) 19W idle. En dat is nog zonder PicoPSU.

[magic_japie]

Pantagruel schreef op vrijdag 07 december 2012 @ 14:13:
[...]



Psst 1222x (extern) incl. kabels overnemen ligt hier min of meer stof te verzamelen

Is idd een leuke RAID kaart, maar realiseer je wel dat je dan 'enterprise' hdd's aan zult moeten schaffen ivm TLER.

Ik heb geen enterprise WD's thuis, gewone huis-tuin-en-keuken WD's...

[Deveon]

FireDrunk schreef op vrijdag 07 december 2012 @ 14:32:
RAIDZ kan prima, mits je een SSD als SLOG gebruikt. Dan is het prima te gebruiken voor VM's.

Ik ben degene met de i5-3550 En die doet inderdaad (met een goed bord) 19W idle. En dat is nog zonder PicoPSU.

Kan je zo een SLOG ook gebruiken op een virtual disk die op een ssd staat? Ik merk namelijk dat mijn schrijf performance erg teleurstellend is.

[Pantagruel]

magic_japie schreef op vrijdag 07 december 2012 @ 14:36:
[...]


Ik heb geen enterprise WD's thuis, gewone huis-tuin-en-keuken WD's...

Probleem is dat het gros van de consumenten disks tegenwoordig in firmware totaal geen TLER/ERC/CCTL ondersteuning meer bieden en min of meer onbruikbaar worden in combi met een hardwrae raid kaart.

Dan bereidt je er maar alvast mentaal op voor dat je, bij gebruik van een hardware RAID controller als bijv. de Areca, problemen kunt gaan krijgen. Op moment dat het vlgs. de controller te lang duurt voordat de hdd klaar is met het herstellen van een lees of schrijf fout, oormerkt hij de disk in kwestie als onbruikbaar en knikkert hem veervolgens uit de array. De evt. gevolgen laten zich raden.

[magic_japie]

Nou joepie dan. Ik heb de bestelling on hold gezet.
Dan ga ik toch maar voor de IBM raid controller...

[duncanvdlinden]

Wat gebeurt er eigenlijk als ik de integrated graphics van mijn Q77 moederbord passtrough doet naar een VM. Zonder dat ik een 2e kaart heb?

Ik neem aan dat ESXi dan zelf geen beeld heeft op de VGA aansluiting?
Iemand die dit al eens getest heeft?

Als er geen beeld meer op de VGA kaart is, dan werkt het misschien nog wel remote? (een xxQ chipset kan je via VNC het beeldscherm overnemen)

Als niemand het getest heeft moet ik het zelf maar eens proberen, maar was toch benieuwd naar jullie bevindingen.

[jadjong]

duncanvdlinden schreef op zaterdag 08 december 2012 @ 12:19:
Wat gebeurt er eigenlijk als ik de integrated graphics van mijn Q77 moederbord passtrough doet naar een VM. Zonder dat ik een 2e kaart heb?

Ik neem aan dat ESXi dan zelf geen beeld heeft op de VGA aansluiting?
Iemand die dit al eens getest heeft?

Als er geen beeld meer op de VGA kaart is, dan werkt het misschien nog wel remote? (een xxQ chipset kan je via VNC het beeldscherm overnemen)

Als niemand het getest heeft moet ik het zelf maar eens proberen, maar was toch benieuwd naar jullie bevindingen.

Beeld gaat op zwart zodra je een vm start, wanneer de windows-desktop van de vm geladen is zal deze in beeld komen. Wanneer je de volgende keer ESXi start kom je niet meer in de local console, het beeld blijft hangen op 'loading c_nic register'. Alleen de Vsphere software vanaf een andere pc of draaiende vm doet het. Remote IPMI of VPro gaat het ook niet meer doen, die gebruiken immers beeld gegenereerd door de videokaart.

[Compizfox]

Momenteel heb ik een homeservertje op basis van Intel socket 775, maar ik wil wat met virtualisatie mbv ESXi gaan doen.
Dit heb ik éénmaal eerder geprobeerd, maar dat bleek geen succes omdat mijn CPU (Intel E5300) geen VT-x ondersteunt.
Het plan is om minstens 2 VM's tegelijk te gaan draaien, één met ZFSguru en één met Debian. Daarnaast wil ik af en toe een VM met Windows 7 oid gaan gebruiken.

Ik wil dus de boel gaan upgraden, maar de grote vraag is of ik voor AMD of voor Intel moet gaan kiezen. Mijn budget is rond de €200 (voor moederbord, CPU en RAM). Liefst eronder, maar ik besef me dat dat lastig gaan worden.

Ik heb er over nagedacht om een socket 775-CPU te kopen en die op mijn huidige moederbord te prikken, maar dan zit je met een verouderde architectuur en daarmee hoog stroomverbruik.

Ik heb 2 setups gemaakt waar ik tussen twijfel:

AMD-systeem:

#	Product	Prijs	Subtotaal
1	AMD FX-6100 Boxed	€ 101,95	€ 101,95
1	ASRock 970 Extreme3	€ 69,10	€ 69,10
1	Corsair CMV8GX3M2A1333C9	€ 31,95	€ 31,95
Bekijk collectie Importeer producten		Totaal	€ 203,-

Intel-systeem:

#	Product	Prijs	Subtotaal
1	Intel Core i3 2120 Boxed	€ 103,95	€ 103,95
1	Gigabyte GA-Z77M-D3H	€ 59,99	€ 59,99
1	Corsair CMV8GX3M2A1333C9	€ 31,95	€ 31,95
Bekijk collectie Importeer producten		Totaal	€ 195,89

Ik vraag me af welke processor nou eigenlijk beter presteert. Ik hoor van de ene dat de AMD FX-6100 beter is voor virtualisatie omdat hij 6 cores heeft. De Intel i3 2120 heeft maar 2 cores (4 threads met hyper-threading), maar schijnt per core veel sneller te zijn.
In benchmarks zie ik niet veel verschil, maar wat is voor virtualisatie handiger?

Daarnaast las ik dat met een AMD 9-series chipset ook IOMMU kunt gebruiken. Het Intel-systeem heeft dan weer geen VT-d. Dat is toch nodig om bijvoorbeeld een PCI-kaartje aan te bieden aan een guest?

[CH4OS]

Om de hyperthreading hoef je het niet te doen, ESX is niet zo happig op hyperthreading (zover ik de documentatie begrepen heb), dus dat zou ik wellicht zelfs uitzetten.

[ Voor 13% gewijzigd door CH4OS op 08-12-2012 23:27 ]

[FireDrunk]

ESXi is tegenwoordig wel HyperThreading aware, en houdt er ook wel rekening mee.
Wat ESX niet kan is efficient schakelen naar HyperThreading cores als het denkt dat instructies sneller lopen op de 'nep' core... (Wat Windows volgens mij tegenwoordig wel kan.)

Maar zeker weten doe ik het niet.

HyperThreading is iig niet echt een wondermiddel ofzo hoor... Dus ga vooral voor de zuinigste setup

Over VT-d, pas heel erg op met AMD, er is bar weinig bekend over PCIe Device Passthrough, en het feit dat een 9xx chipset een IOMMU heeft, wil absoluut niet zeggen dat Device Passthrough werkt. (VT-d is een Intel merknaam )

(Zoals in de startpost staat: Voordat VT-d/IOMMU werkt, moet zowel je CPU, Chipset, EN je BIOS/UEFI het ondersteunen...)

[ Voor 30% gewijzigd door FireDrunk op 08-12-2012 23:35 ]

[Compizfox]

Ik zag dat bij Intel VT-d pas ondersteund wordt bij de duurdere Xeon's, Core i5's en i7's. Buiten mijn budget dus.

Bij AMD kan ik eigenlijk niet vinden of de CPU IOMMU heeft, dat staat er niet expliciet bij. Alleen "Virtualisation: Yes", maar daar heb je niet veel aan. Ik las echter dat het bij AMD op elke CPU zit, en dat je alleen een chipset met IOMMU moet hebben. Elke 9-series chipset zou dat ondersteunen.

Wat zou jij aanraden? Het liefste wil ik eigenlijk wel mijn X100P-kaartje (PCI) willen blijven gebruiken voor Asterisk.

[FireDrunk]

De oude PCI standaard is bijna nooit met passtrough door te geven. Dat kan allleen als de PCI Controller zelf weer op PCI express zit. Passthrough is pas gemeengoed sinds PCI Express...

Je zou eens op internet moeten kijken naar vergelijkbare builds. Maar of je iets vind, geen idee.

[Stefanovic45]

Ik wil jullie graag uitnodigen om mee te discussiëren in de bbg over een thuisserver die in januari op de frontpage zal verschijnen Ik heb al veel informatie vergaard uit dit topic, maar ik wil graag zeker weten dat we straks het best mogelijke systeem op de frontpage zetten.

[BBG] Thuisserver januari 2013

[Compizfox]

FireDrunk schreef op zondag 09 december 2012 @ 06:51:
De oude PCI standaard is bijna nooit met passtrough door te geven. Dat kan allleen als de PCI Controller zelf weer op PCI express zit. Passthrough is pas gemeengoed sinds PCI Express...

Je zou eens op internet moeten kijken naar vergelijkbare builds. Maar of je iets vind, geen idee.

Dus PCI passthrough kan ik eigenlijk wel vergeten? Dat is wel flink jammer eigenlijk.
Maar PCI-e passthrough kan weer wel, maar enkel als ik IOMMU/VT-d support heb?

Ik neig momenteel toch sterk naar de AMD-setup, omdat de ASRock 970 Extreme3 sinds bios-versie P1.40 IOMMU schijnt te ondersteunen.
Bij een Intel-setup ga je dat niet tegenkomen op low-budget bordjes en CPU's.

FireDrunk schreef op zaterdag 08 december 2012 @ 23:33:
Over VT-d, pas heel erg op met AMD, er is bar weinig bekend over PCIe Device Passthrough, en het feit dat een 9xx chipset een IOMMU heeft, wil absoluut niet zeggen dat Device Passthrough werkt. (VT-d is een Intel merknaam )

Waarom zou het dan niet werken?

[ Voor 38% gewijzigd door Compizfox op 09-12-2012 13:31 ]

[Koffie]

Ik meld me hier ook aan

Ik draai nu ESXi op een Asus DSBV-DX moederbord met een Intel Xeon E5405.
Dit is nogal een lawaaierige stroomvretende server die ik wil vervangen voor iets wat snel, stil, zuinig en goedkoop is

Ik lees veel over VT-D en passthrough van de videokaart, iets wat ik volgens mij niet nodig heb (gebruik het nu ook niet).
De VM's zijn voornamelijk voor een FreeNAS fileserver (icm RDM), een Linux hostingserver (HTTP/SMTP) en wat Windows servertjes om met terminal server / Citrix te rotzooien.

Volgens mij is een i3 systeem zoals hierboven gepost een stuk zuiniger (en stiller) dan mijn huidige server setup, en zou ik hiermee prima uit de voeten moeten kunnen?

[Compizfox]

Dat is eigenlijk ook ongeveer mijn vraag. Ik postte de 2 systemen als opzetje, ik zoek nog ervaringen/advies van mensen hier of ik beter voor het AMD- of Intel-systeem kan gaan

Ik denk dat ik toch voor het AMD-systeem ga vanwege de IOMMU support. Ik heb al in meerdere fora gelezen dat de Asrock 970 Extreme 3 werkende IOMMU support heeft.
Bij Intel is VT-d support in deze prijsrange niet te vinden.

Ik vraag me nou wel weer af of ik het performanceverschil tussen de FX-4100 en de FX-6100 echt nodig heb.

#	Product	Prijs	Subtotaal
1	AMD FX-4100 Black Edition	€ 90,95	€ 90,95
1	ASRock 970 Extreme3	€ 69,95	€ 69,95
1	Corsair CMV8GX3M2A1333C9	€ 31,95	€ 31,95
Bekijk collectie Importeer producten		Totaal	€ 192,85

[ Voor 83% gewijzigd door Compizfox op 10-12-2012 22:00 ]

[FireDrunk]

Die amd is dan ook minder zuinig dan een Intel set en stukken langzamer dan de eerste CPU van intel met VT-d.

@koffie, een i3 is idd snel genoeg. Of zelfs een G860... een 5405 is niet echt moeilijk in te halen...
@compizfox, als je zeker weet dat dat bord een werkende IOMMU heeft is het inderdaad gewoon een optie.

ESXi kan gewoon met de iommu van AMD overweg, dus dat zou geen problemen mogen opleveren.

[ Voor 31% gewijzigd door FireDrunk op 10-12-2012 22:15 ]

[Compizfox]

FireDrunk schreef op maandag 10 december 2012 @ 22:13:
Die amd is dan ook minder zuinig dan een Intel set en stukken langzamer dan de eerste CPU van intel met VT-d.

Ja, maar ook 2x zo goedkoop. Vind je het heel gek dat ie dan wat langzamer is
De goedkoopste CPU van Intel met VT-d is namelijk de pricewatch: Intel Core i5 2400

De borden met VT-d support op socket 1155 zijn ook flink prijziger. Het totaal maakt het dan gewoon overbudget, helaas.

@compizfox, als je zeker weet dat dat bord een werkende IOMMU heeft is het inderdaad gewoon een optie.

ESXi kan gewoon met de iommu van AMD overweg, dus dat zou geen problemen mogen opleveren.

Dat is mooi om te horen.

Na wat leeswerk blijkt de AMD FX-4100 gewoon een dual-core met een extra integer processor.

The "quad core" AMD is selling now - the FX-4100 - is actually a DUAL CORE processor. The FX 4100 has two integer pipelines, and two INTEGER (whole number) processors, one FPU/SSE/MMX processor, one shared L2 cache, and one shared decoder. As a result, more often than not, the FX 4100 "quad core" performs right on par with dual core counter parts. The FX 8150 performs on par with quad core counter parts.

Denk dat het dus toch maar de FX-6100 wordt

Bedankt voor jullie input

[ Voor 44% gewijzigd door Compizfox op 10-12-2012 22:22 ]

[CH4OS]

Compizfox schreef op maandag 10 december 2012 @ 22:18:
Ja, maar ook 2x zo goedkoop. Vind je het heel gek dat ie dan wat langzamer is
De goedkoopste CPU van Intel met VT-d is namelijk de pricewatch: Intel Core i5 2400

De borden met VT-d support op socket 1155 zijn ook flink prijziger. Het totaal maakt het dan gewoon overbudget, helaas.

Sorry? Dan heb je denk ik deze gemist: pricewatch: Intel Pentium G2120 Boxed Nog geen 90 euro! VT-d is naar mijn weten voor directed I/O, wat alleen dure moederborden hebben, ik heb zelf ook geen VT-d in gebruik hoor en toch trek ik nu al zo'n 90MB/sec over gigabit.

[ Voor 11% gewijzigd door CH4OS op 11-12-2012 12:41 ]

[Compizfox]

De G2120 heeft toch echt geen VT-d volgens de site van Intel hoor http://ark.intel.com/prod...r-G2120-3M-Cache-3_10-GHz
Ik denk dat het het verwart met VT-x.

En je herhaald in feite precies wat ik zeg, bij Intel hebben alleen de dure moederborden VT-d support.

Terwijl ik hierboven wel een AMD-systeem met IOMMU (AMD's naam voor VT-d) heb staan voor minder dan €200.

VT-d heb ik trouwens nodig voor PCI-e passthrough.

[ Voor 11% gewijzigd door Compizfox op 11-12-2012 13:00 ]

[Pantagruel]

CptChaos schreef op dinsdag 11 december 2012 @ 12:38:
[...]
Sorry? Dan heb je denk ik deze gemist: pricewatch: Intel Pentium G2120 Boxed Nog geen 90 euro! VT-d is naar mijn weten voor directed I/O, wat alleen dure moederborden hebben, ik heb zelf ook geen VT-d in gebruik hoor en toch trek ik nu al zo'n 90MB/sec over gigabit.

Compizfox schreef op dinsdag 11 december 2012 @ 12:56:
De G2120 heeft toch echt geen VT-d volgens de site van Intel hoor http://ark.intel.com/prod...r-G2120-3M-Cache-3_10-GHz
Ik denk dat het het verwart met VT-x.

En je herhaald in feite precies wat ik zeg, bij Intel hebben alleen de dure moederborden VT-d support.

Terwijl ik hierboven wel een AMD-systeem met IOMMU (AMD's naam voor VT-d) heb staan voor minder dan €100.

VT-d heb ik trouwens nodig voor PCI-e passthrough.

Ach wat is duur, vlgs deze forum post doet de AsRock B75 Pro3-M mits voorzien van de juiste CPU, gewoon aan passthrough.

VSphere Client hastig geöffnet und zum passthrough geklickt ......

Alles da (ok vieles als unbekanntes Gerät, aber da und wählbar), der LSI, der Asmedia Controller, der RTL 8111, die intere GPU etc...

2 VMs aufgesetzt und an eine den LSi an die 2. den Asmedia durchgereicht..

[ Voor 21% gewijzigd door Pantagruel op 11-12-2012 12:59 ]