Het grote thuis-virtualisatie topic

[Nextron]

Hypervisor

Alles draait op ESXi 4.1u1. Ik ben bekend met VMware Workstation en VMware is langer bezig dan de concurrentie. Verder heb ik geen alternatieven serieus overwogen.

Hardware

#	Product	Prijs	Subtotaal
1	IBM ServeRAID-BR10i Via eBay erg goedkoop te krijgen als 'system pulls'. Je mist alleen een PCIe bracket. Geconfigureerd als passthrough.	€ 82,32	€ 82,32
1	Intel Xeon E3-1220 Boxed	€ 165,10	€ 165,10
6	Samsung EcoGreen F4EG HD204UI, 2TB Deze zijn aangesloten op de ServeRAID.	€ 59,99	€ 359,94
1	Fractal Design Define R3 (Zwart)	€ 87,44	€ 87,44
1	Fractal Design Silent Series 140mm Fan, 140mm	€ 10,59	€ 10,59
1	Corsair Builder CX430 V2 Laagste vermogen, enkel-rail voeding.	€ 37,27	€ 37,27
1	Kingston SSDNow V+100 SVP100S2/96G (stand-alone drive) 96GB De bootschijf en datastore. Gekozen voor de agressieve garbage collection.	€ 114,99	€ 114,99
1	Kingston ValueRAM KVR1333D3E9SK2/8G Voorlopig 8GB, tot de 16GB beschikbaar wordt.	€ 75,50	€ 75,50
1	Club3D HD3450 Voor passthrough, schijnt hier te lukken.	€ 28,02	€ 28,02
1	Supermicro MBD-X9SCA-F-O	€ 192,68	€ 192,68
		Totaal	€ 1153,85

Alle hardware wordt standaard door ESXi ondersteund en VT-d werkt. De KVM met mounten van virtuele media werkt erg fijn: Je hoeft dus nooit een monitor, keyboard, DVD-speler of USB-stick aan te sluiten, alleen voeding- en netwerkkabels.

Bij ontvangst was de bios op het moederbord de op-één-na-nieuwste, die schakelde de onboard video echter uit wanneer een andere grafische kaart werd geplaatst. De nieuwste die op dat moment pas 8 dagen uit was liet je kiezen welke output gebruikt moet worden. Een server zal die optie dan ook niet vaak nodig hebben. De losse grafische kaart op passthrough werkt alleen nog niet.

Het systeem omvat zes hardeschijven van elk 2TB. Eén van deze wordt door middel van FlexRAID gebruikt voor pariteit. Effectief blijft er (5 × 2TB=) 10TB over, oftewel (^10TB/_1,0244=) 9,09TiB aan opslagruimte.

Tijdens de installatie was het idle verbruik 59W. Het actuele verbruik moet ik nog nameten.

Virtuele machines

Tot nu toe draai ik het volgende:

OS/Appliance	Functie
pfSense	Router, firewall
Windows server 2008 met flexraid[/td bgcolor=#fafafa]	NAS
Windows XP	Camerabewaking, printerserver

Er moet nog een download-VM, LAMP, domotica-host bij. Hopelijk krijg ik de grafische kaart nog werkend met VT-d, want dan komt XBMC erbij en een monitor met camerabeelden.

Foto's

Zes van de acht 3,5" HD-trays zijn gevuld met 2TB schijven en worden gekoeld door twee 12cm fans. De SSD werkt als ESXi datastore en is op de onderste 5,25" tray verstopt.


De IBM ServeRAID Br10i met IT firmware. De SAS naar SATA breakout kabels en SATA kabels zijn goed weg te werken. Van de rode SATA-kabels is er nog maar één in gebruik voor de SSD, maar weghalen vond ik nog niet nodig.


Een servermoederbord, dus de geheugenlatjes liggen een kwartslag gedraaid. Dit is de standaard CPU-fan, de CPU-fanheader zit echter erg ver van de CPU en de kabel is net lang genoeg. De exhaust heb ik bovenin in plaats van achterin. Ook de CPU- en moederbordvoeding is erg goed weg te werken in deze kast.


Daar zitten dan al die kabels. Het sluiten van deze kant van de kast is best lastig.


De schijven zijn zichtbaar als losse volumes. Flexraid gebruikt één (of meerdere) schijf voor pariteit. Het is ook mogelijk een virtueel volume als container te maken waarbij je zelf configureert welke volumes, mappen of bestanden zichtbaar zijn (laatste volume).
Voor oplettende lezers: Het verbruik van het pariteitsvolume is inderdaad kleiner dan één van de datavolumes. De pariteit wordt wekelijk geüpdate en loopt nu dus achter.

Motivatie

Voor ik aan een virtualisatieserver dacht wilde ik alleen een NAS hebben omdat mijn desktop vol zal met schijven en de schijven zelf ook bijna vol zaten. Geen ruimte voor nieuwe schijven dus en ik ben geen fan van externe schijven. Geschrokken van 4+ disk NASsen bleek zelfbouw goedkoper. Ik ben voor een wat zwaarder systeem gegaan dan nodig is voor een NAS om meteen de oude server en router te vervangen.
Initieel wilde ik met mdadm een RAID5 NAS opzetten. Uiteindelijk ben ik toch voor flexraid gegaan omdat ik juist pariteit wil voor extra zekerheid tegen schijfuitval. Flexraid voegt dat toe zonder striping toe te passen, precies wat ik nodig heb. Het risico om alle data kwijt te raken bij meervoudig schijfuitval wanneer striping gebruikt wordt vond ik onacceptabel. De snelheidswinst die ik nu misloop zou ik toch niet benutten.
Verder moest de server dienst gaan doen als HTPC maar dat valt dus vies tegen.

[ Voor 4% gewijzigd door Nextron op 23-08-2011 23:15 ]

[HyperBart]

He nou zeg, een TS die zijn eigen virtualisatieplatform hier niet even dumpt is ook nogal raar

Hypervisor

Gekozen voor VMware's ESXi, bewezen platform, stabiel, heel lage footprint op de hardware, bootable van USB (ook al draait ie omwille van gemak en het feit dat ik nog wat moest uitzoeken omtrent drivers nog op mijn SATA-drive), in mijn ogen bijna geen performance verlies in verhouding tot de flexibiliteit die je ervoor terugkrijgt, makkelijk te configureren, propere interface en bovenal: MEMORY OVERCOMMITMENT

Hardware

Slechts één HDD van 320 GB via SATA

#	Product	Prijs	Subtotaal
1	Intel PRO 1000MT Server Adapter (1Gbps, RJ-45, PCI-X)	€ 98,-	€ 98,-
1	Antec New Solution VSK-2000-EC	€ 38,72	€ 38,72
1	Intel Core i3 540	€ 79,10	€ 79,10
1	be quiet! Pure Power L7 300W	€ 35,50	€ 35,50
1	GeIL Value PLUS GVP38GB1333C9DC	€ 40,94	€ 40,94
1	Kingston ValueRAM KVR1333D3N9K2/8G	€ 36,35	€ 36,35
1	MSI H55M-E33	€ 62,-	€ 62,-
Bekijk collectie Importeer producten		Totaal	€ 390,61

En neen ik heb geen zot geld betaald voor die NIC , die heb ik nog via via gekregen...

heb hier zelfs nog een quadriple NIC liggen, maar die krijg ik voorlopig niet werkend, eigenlijk zou ik die eens in mijn andere PC moeten steken en kijken of ie werkt...

Virtuele machines

mixed environment van Windows en Linux:



3x Windows 2008 R2 Enterprise (DC, vCenter en VPN-machine)
1x Ubuntu 11.04 64-bits voor Sabnzbd, Couch Potato en Sick Beard (mijn favoriet, de hele boite mag crashen, zolang die nog maar draait )
1x Windows XP Pro 32-bits (handig als ik thuis wat dingen wil doen remote, kan ik benaderen via SSh-tunnel of via PPTP-VPN)

De laatste draait in de Test-pool...

Foto's

ESXi en varia

Motivatie

Tja, het begon weer te kriebelen, ik had een bakje staan maar dat was oude hardware en door de blog van mux kwam ik er eigenlijk op uit dat die te veel stroom ging zuipen, zelfs zonder te meten . Die bak maar gedecommisoned (hmm, waar staat die eigenlijk ) en vervangen door deze ESXi-compatibele setup, 10x zo krachtig en flexibel en een sterk gereduceerd verbruik, dat was het mij wel waard, en kijk eens aan, 5 VM's en ik heb nog overschot...

Toekomstmuziek

Voor de lol zou ik er graag nog een SSD willen insteken, alleen moet ik dan weer gaan opletten waar ik welke VM zet, mijn downloadbak zou ik dan moeten opsplitsen zodat de bootpartitie op de SSD staat en de downloadpartitie op de HDD, maar de boot is dan weer te groot, maar mogelijk met een herinstallatie van Pyro deze week zou ik daar rekening mee kunnen houden...

Backups doe ik niet aan mee, mijn VM's draaien nu, dat is voldoende, ik vloek wel even als die disk crashed, maar ik kan er mee leven...

Data die kritiek is staat toch op de NAS, backup ik naar een 1TB HDD via eSATA onregelmatig maar courant. Volgende droom is (als mijn QNAP vol staat) te vervangen of aan te vullen met een machine waar ik ZFS op draai... Enkele HDD's (4 tot gecombineerd met een SSD voor te ZIL en gaan maar!

[HyperBart]

Deze wou ik jullie toch niet onthouden

[MrOizo2005]

HyperBart schreef op maandag 12 september 2011 @ 20:51:
Deze wou ik jullie toch niet onthouden

Nice ! maar 1 storage atm?

Hier is mijn kleine setupje: (vorige PC die toevallig ESXi out-of-the-box draait).
Er staat 1 ding doorgestreept, aangezien er iets niet hoort te draaien op non-apple HW.

Denk dat een screenshot net zoveel zegt over de hardware die ik draai

CentOS	ClearFoundation Firewall (vroeger ClarkConnect)
Ubuntu	Spotweb, Sabnzbdplus, Airplayer, Sickbeard, Couchpotato, MySQL, PHP
Ubuntu Buren	Sabnzbdplus, Sickbeard, Couchpotato
Oizopower-PC	Copy van me PC om te testen

[ Voor 74% gewijzigd door MrOizo2005 op 12-09-2011 21:12 ]

[polu]

Hypervisor

Als Hypervisor heb ik gekozen voor Citrix Xenserver omdat ik gebruik wilde maken van XEN in combinatie met een eenvoudig te configureren/beheren systeem (vergelijkbaar met ESX(i)).

Hardware

Het systeem heeft 1.5TB in RAID-1 voor de besturingsysteem, en twee losse 2TB en een 1,5TB schijf voor opslag van overige bestanden.

In de toekomst wil ik dit wijzigen in 1,5TB RAID-1 voor de besturingssysteem en 6TB RAID-5 voor de overige gegevens.

#	Product	Prijs	Subtotaal
1	Antec Earthwatts EA 380	€ 0,-	€ 0,-
1	Chieftec UNC-210S-B	€ 0,-	€ 0,-
1	HP P400	€ 139,23	€ 139,23
1	Intel Core 2 Duo E6750	€ 0,-	€ 0,-
1	Intel Entry Server Board S3210SHLC	€ 204,24	€ 204,24
4	Kingston ValueRAM KVR800D2E5K2/2G	€ 33,46	€ 133,84
4	Noctua NF-R8-1800 , 80mm	€ 14,28	€ 57,12
3	Samsung EcoGreen F2 EG HD154UI, 1.5TB	€ 49,90	€ 149,70
2	Samsung EcoGreen F4EG HD204UI, 2TB	€ 59,90	€ 119,80
Bekijk collectie Importeer producten		Totaal	€ 803,93

Virtuele machines

OS/Appliance	Functie
Gentoo Linux	Web, mail, database en svn server
Gentoo Linux	Fileserver en LDAP server
Windows 2008 Server	Testserver / Domaincontroller
Windows 7	Download en test pc

Foto's

Motivatie

Ik test graag dingen uit onder verschillende (server) besturingssystemen. Vroeger had ik voor elk OS/project een aparte server nodig, nu kan het allemaal op een apparaat.

[Aapie]

Hypervisor

Ik draai Xenserver 6.0 als hypervisor. Werkt makkelijk en gratis ik heb niet echt voorkeur tussen vmware en citrix.

Hardware

Alles wordt ondersteund behalve de sata 600 chip wordt niet ondersteund. Nu had ik hier voor een hp p400 liggen, maar deze blijkt het moederbord niet te slikken. Dan nog maar ff met 3 schijven verder.

#	Product	Prijs	Subtotaal
3	Samsung EcoGreen F4EG HD204UI, 2TB	€ 95,90	€ 287,70
1	Intel Core i5 750	€ 157,40	€ 157,40
1	OCZ Agility 2 SATA II 2.5" SSD 60GB	€ 91,-	€ 91,-
2	GeIL Value PLUS Dual Channel 8GB (GVP38GB1333C7DC)	€ 95,53	€ 191,06
1	Asrock P55 Extreme4	€ 128,35	€ 128,35
Bekijk collectie Importeer producten		Totaal	€ 855,51

Virtuele machines

OS/Appliance	Functie
Win server 2008 web	Webserver

Foto's

Je zal wel denken waar zijn de andere schijven Die moeten nog eve gekoppeld worden

Motivatie

De Xenserver is vandaag opnieuw geïnstalleerd.De webserver was de enige die ik gebackuped had en overgezet heb! Voor de rest komen er nog server's voor test doeleinden en een mail server bij.

[Bierkameel]

Ik heb een zelfbouw ESX server draaien met een quadcore Xeon en 15K SAS schijven in RAID0, toch kwam ik niet boven de 50 MB/sec uit naar mijn Win2K8 servers, dit was met de E1000 NIC, net ff alle NIC's omgezet naar VMXNET3 en voila, netjes 100MB/sec
_{Dit is dus schijven vanaf mijn laptop naar de server}

Voor de mensen die nog een leuke server zoeken, Dell heeft de T110 nu in de aanbieding, ik ga er ook eentje bestellen met 16GB, kan ik iets meer kwijt dan de 8GB die ik nu heb.

[ Voor 6% gewijzigd door Bierkameel op 14-01-2012 23:39 ]

[Kavaa]

Hypervisor

Als hypervisor heb ik VMWARE ESXi 4.1 (op dit moment ESXI 5) gekozen omdat het stabiel is, en ze zijn al het langste bezig.
Nog een andere rede voor VMWARE is dat hij een lage footprint heeft en dus op een USB Stickje kan.

Hardware

#	Product	Prijs	Subtotaal
1	Intel Gigabit CT Desktop Adapter	€ 23,15	€ 23,15
1	Intel PRO/1000 GT	€ 23,92	€ 23,92
1	TP-Link TL-SG1005D	€ 14,60	€ 14,60
1	Samsung Spinpoint F3 HD103SJ, 1TB	€ 76,72	€ 76,72
1	Western Digital Caviar Black WD1002FAEX, 1TB	€ 101,50	€ 101,50
1	Cooler Master Elite 343	€ 29,41	€ 29,41
1	Intel Core i3 540	€ 76,90	€ 76,90
1	TP-Link TL-WR1043ND	€ 39,90	€ 39,90
1	be quiet! Pure Power L7 300W	€ 36,40	€ 36,40
2	GeIL Value PLUS GVP38GB1333C9DC	€ 44,50	€ 89,-
1	MSI H55M-E33	€ 0,-	€ 0,-
Bekijk collectie Importeer producten		Totaal	€ 511,50

Sinds ESXi 5.0 wordt ook de onboard nic standaard ondersteund dus heb nu 3 NIC's erin zitten.
1 is puurt voor ISCSI van nas en 1 voor WAN en 1 voor LAN.
Ik heb verder geen VT-D of dergelijke nodig gewoon netwerkkabels en stroom erin en gaan.

Energieverbruik heb ik niet kunnen testen.
Zal iets hoger liggen als de machine van HyperBart,

Externe Datastore:

Een server 2008 r2 nas met 12 TB+ Storage.
Met ISCSI Targets verbonden aan de VMWARE Server

Virtuele machines

OS/Appliance	Functie
Windows Server 2008 R2 X64	DHCP, DNS, AD, RRAS. voor collega's enz die af en toe op servers moeten inloggen hebben hier dus een apart account om in te loggen. deze server hangt met 1 poot in het LAN netwerk en met de andere in het WAN netwerk.
Windows 7 Ultimate X64	Workstation, DEV/RDP BAK en vSphere client.
Ubuntu Server 11.04	Webserver, draait onderandere phpmyadmin, spotweb en nog wat losse dingentjes.
Windows 7 Ultimate X64	Windows 7 bakje voor me vriendin om op afstand in te loggen.
Windows Server 2008 R2 X64	Hamachi Gateway server. Voor het connecten van me hamachi zodat ik overal toegang heb tot me thuisnetwerk. En vCenter Server
Windows Server 2008 R2 X64	AD, DNS, Web, File, Exchange server. Dus een mailserver die al me mail van websites enz opvangt met 30+ mail accounts. Dit is een ander domein als de domein controller hierboven en is ook niet met elkaar gekoppeld.
Windows 7 Ultimate X64	Mailviewer om alle mail accounts te bekijken ook die nog pop zijn en van het werk (Exchange) enz enz. staan + 100 mail accounts op ingesteld.

Verdere bakjes staan momenteel allemaal uit en doen af en toe wat als ik ze nodig heb.

Foto's

Motivatie

Aangezien ik zelf alleen nog maar een MAC heb om mee te werken en Windows systeembeheerder ben en toch wel van het thuis knutselen en proberen enz hou. Toch besloten om een thuisserver voor virtualisatie neer te zetten.
Ik heb er meerdere hangen in een datacenter maar dat zijn geen speeltjes om het zo maar te zeggen.
De rede voor VMWARE staat hierboven uitgelegd.
Ben nog aan het kijken voor een upgrade omdat ik toch nog wat ram te kort kom (16GB) is MAX op dit moederbord.
Even terug naar de motivatie
Dus omdat ik alleen een MAC gebruik voor Web-development enz miste ik toch windows. Vandaar dus ook de diverse windows 7 bakken.

Energie zuinig hoefde hij niet echt te zijn maar op het moment van kopen moest hij wel goedkoop zijn omdat ik net me NAS had een upgrade had gegeven en die zuipt ook aardig dus energiezuinig was geen breekpunt.

Voor verdere vragen of opmerkingen sta ik open.

[GioStyle]

Hypervisor

Ik ben altijd al van jongsaf aan met Windows opgegroeid. Natuurlijk heb ik ook met andere OS'sen gewerkt, maar ik kom toch telkens weer terug op Windows, omdat het voor mij het makkelijkst werkt. In het begin een server gebouwd met Windows Small Business Server 2003. Vervolgens naar 2008 versie geupgraded. Hardware is door de jaren heen ook telkens uitgebreid/vernieuwd. Op een gegeven moment na veel gedoe, foutmeldingen, storingen etc. besloten om maar een Hyper-V bak te maken, zodat wanneer er een storing optreedt, niet gelijk alle onderdelen plat liggen.

Hardware

#	Product	Prijs	Subtotaal
1	Intel Core i5 3550 Boxed	€ 190,95	€ 190,95
1	MSI H77MA-G43	€ 77,61	€ 77,61
2	Corsair Vengeance CMZ16GX3M2A1600C10	€ 96,50	€ 193,-
2	Crucial m4 CT256M4SSD2 256GB	€ 189,90	€ 379,80
2	Samsung SpinPoint M8 HN-M500MBB, 500GB SATA-300, 8MB, 5400rpm	€ 64,65	€ 129,30
2	Samsung SpinPoint M8 HN-M101MBB, 1TB SATA-300, 8MB, 5400rpm	€ 89,10	€ 178,20
2	Intel PRO/1000 PT Dual Port Server Adapter (2x1000Mbps, PCI-e 4x)	€ 159,-	€ 318,-
1	Seasonic S12II-Bronze 330W	€ 0,-	€ 0,-
1	Sharkoon SATA QuickPort Intern 6-Bay	€ 57,30	€ 57,30
1	Silverstone Grandia GD05B	€ 0,-	€ 0,-
Bekijk collectie Importeer producten		Totaal	€ 1.524,16

Virtuele machines

OS/Appliance	Functie
Windows Server 2008 R2 Standard	Active Directory
Windows Server 2008 R2 Standard	Exchange 2010
Windows Server 2008 R2 Standard	SharePoint 2010
Windows Server 2008 R2 Standard	Downloads (nieuwsgroepen)
Windows Server 2008 R2 Standard	Media Server (Plex)
Windows Server 2008 R2 Standard	Media Server
Windows Server 7 Ultimate	Testmachine
Windows Server 8 Release Preview	Testmachine

Foto's

Slechte foto gemaakt met telefoon, maar beter iets dan niets:

Motivatie

Echt diepgaande technische kennis van hardware heb ik niet (op de middelbare school geen natuur- en scheikunde gekozen), maar door veel te lezen, uit te proberen en op te zoeken wilde ik door de juiste componenten een energiezuinige, maar toch een erg krachtige Hyper-V bak maken. Dat is me wel redelijk gelukt. Bovenstaande setup verbruikt net iets meer dan 40 watt continu.

Er komen binnenkort nog wel enkele virtual machines bij. Ik zou graag een VM willen die het hele netwerk afspeurt op virussen, maar heb nog geen software gevonden wat aan mijn eisen voldoet.

Het enige mindere van mijn Hyper-V bak is opslag. Ik begin wel erg krap te zitten voor mijn films/series. Als de prijzen van harde schijven in mijn ogen weer op een normale prijsniveau zitten, dan wil ik graag 4x 3TB of 4TB schijven aanschaffen en deze in mijn workstation stoppen zodat deze toch niet altijd aan blijven staan, maar alleen als er gebruik van gemaakt wordt.

[Vuurvoske]

Hypervisor

Mijn keuze is gevallen op Microsoft Hyper-V op Server 2008 R2 standard. Dit komt voornamelijk doordat ik op het host OS XBMC wil draaien.

Hardware

#	Product	Prijs	Subtotaal
1	Areca ARC-1220	€ 0,-	€ 0,-
1	Intel Pentium G620 Boxed	€ 53,45	€ 53,45
1	Intel Gigabit CT Desktop Adapter	€ 25,14	€ 25,14
1	Samsung Spinpoint F4 EG HD204UI, 2TB	€ 94,90	€ 94,90
1	Samsung SpinPoint T166 HD501LJ, 500GB	€ 0,-	€ 0,-
3	Western Digital Green WD20EARS, 2TB	€ 0,-	€ 0,-
1	Antec Three Hundred	€ 45,35	€ 45,35
1	Cooler Master 4-in-3 Device Module	€ 17,50	€ 17,50
1	Recom RC-PE0DB580	€ 0,-	€ 0,-
1	Kingston ValueRAM KVR1333D3N9K2/8G	€ 36,59	€ 36,59
1	Club3D GeForce GT 440	€ 59,44	€ 59,44
1	Asus P8P67-M (3.0)	€ 104,90	€ 104,90
Bekijk collectie Importeer producten		Totaal	€ 437,27

Virtuele machines

VM Naam	OS/Appliance	Functie
Pegasus	Ubuntu 12.04 LTS x64	Download bak
Aristoteles	Windows server 2008 R2 x64 standard	Fileshare
Plato	Windows 7 x64 Ultimate	Beheer machine
Illidan	Windows server 2003 R2 x64 standard	World of Warcraft 1.12.1 test setup

Foto's

Motivatie

T.z.t. wordt de processor nog geupgrade. Toen ik met dit project begon wilde ik kunnen experimenteren met virtualisatie en 24/7 een download machine beschikbaar hebben.

Overig

Deze machine heeft twee actieve NIC's, ik wilde weten of het gewoon mogelijk zou zijn twee external networks (virtual switches) te creeëren. Dit ging zonder probleem. Nu draaien alle machines behalve Illidan op de CT Adapter. (Niet dat het veel nut heeft, maar het is wel leuk )

[DutchNutcase]

Hypervisor

Ik gebruik KVM, omdat het in de linux kernel ingebakken zit en omdat ik hier al veel langer mee werk. Ben bovendien erg gecharmeerd van de CLI beheersinterface.

Hardware

#	Product	Prijs	Subtotaal
1	Highpoint RocketRAID 2300	€ 118,20	€ 118,20
1	Intel Gigabit CT Desktop Adapter	€ 24,80	€ 24,80
1	Realtek RTL8139C (100Mbps, RJ-45, PCI)	€ 4,95	€ 4,95
4	Samsung Spinpoint F1 HD103UJ, 1TB	€ 0,-	€ 0,-
2	Samsung SpinPoint T166 HD501LJ, 500GB	€ 0,-	€ 0,-
1	Antec Sonata III 500 Zwart	€ 99,90	€ 99,90
1	AMD Athlon II X4 605e Boxed	€ 0,-	€ 0,-
2	Kingston ValueRAM KVR1333D3E9SK2/8G	€ 54,55	€ 109,10
1	Gigabyte GA-990FXA-UD3	€ 119,90	€ 119,90
1	Sapphire HD 5450 512MB DDR3 PCIE HDMI	€ 26,95	€ 26,95
Bekijk collectie Importeer producten		Totaal	€ 503,80

Ik heb net de server geupgrade om met IOMMU aan de gang te kunnen gaan. Mijn vorige moederbord had dat niet ingebouwd zitten. Nu heb ik de Highpoint en de Intel NIC doorgezet naar de storage vm. Om deze hardware door te zetten moest ik wel wat kleine dingen oplossen, maar nu heb ik een scriptje opgezet om de boel automatisch op te starten.

code:

### BEGIN INIT INFO
# Provides:          vms
# Required-Start:    $all
# Required-Stop:     $all
# Default-Start:     2 3 4 5
# Default-Stop:      0 1 6
# Short-Description: starts virtual machines
# Description:       starts virtual machines
### END INIT INFO

function pre-start {
    rmmod snd_hda_intel e1000e sata_mv &> /dev/null
    virsh nodedev-detach pci_0000_02_00_0 &> /dev/null
    virsh nodedev-detach pci_0000_09_00_0 &> /dev/null
}

function start-vms {
    # Start primary and secondary domain controllers
    virsh start zeus &> /dev/null
    virsh start hera &> /dev/null

    # Allow for domain controllers (specifically DNS) to start
    sleep 30s

    # Start file server, database server and jumphost
    virsh start athena &> /dev/null
    virsh start artemis &> /dev/null
    virsh start hestia &> /dev/null

    # Allow for file server to start
    sleep 75s

    # Start file server dependant vms (mail, web and download server)
    virsh start hermes &> /dev/null
    virsh start apollo &> /dev/null
    virsh start hades &> /dev/null
}

function stop-vms {
    # Stop download, web and mail servers
    virsh shutdown hades &> /dev/null
    virsh shutdown apollo &> /dev/null
    virsh shutdown hermes &> /dev/null

    # Allow for file server dependant servers to shut down
    sleep 10s

    # Stop jumphost, database server and file server
    virsh shutdown athena &> /dev/null
    virsh shutdown artemis &> /dev/null
    virsh shutdown hestia &> /dev/null

    # Allow for athena to shut down
    sleep 10s

    # Stop domain controllers
    virsh shutdown zeus &> /dev/null
    virsh shutdown hera &> /dev/null
}

# script name
NAME="$0"

# app name
DESC="virtual machines"

case "$1" in
  start)
        echo "Starting $DESC"
        pre-start
        start-vms
        ;;
  stop)
        echo "Stopping $DESC"
        stop-vms
        ;;
  restart)
        echo "Restarting $DESC"
        stop-vms
        start-vms
        ;;
  *)
        N=/etc/init.d/$NAME
        echo "Usage: $N {start|stop|restart}" >&2
        exit 1
        ;;
esac

exit 0

Virtuele machines

Naam	OS	Functie	Opmerkingen	vCPU	RAM
zeus	Debian Wheezy	Primary Domain Controller (slapd, samba, smbldap-tools)		1	1GiB
hera	Debian Wheezy	Secondary Domain Controller (slapd, samba, smbldap-tools)		1	1GiB
athena	Debian Wheezy	Storage VM (nfs, samba)	PCI passthrough (RocketRAID, Intel NIC)	2	2GiB
artemis	Debian Wheezy	Database server (mysql)		1	1GiB
hermes	Debian Wheezy	Mail server (postfix, dovecot, amavis, spamassasin, clamav)		1	1GiB
hestia	Debian Wheezy	Jumphost (ssh, fail2ban)		1	1GiB
apollo	Debian Wheezy	Web server (apache2, php5)		1	1GiB
hades	Debian Wheezy	Download server (sabnzbd, sickbeard, couchpotato, headphones)	Moet nog opgezet worden	1	1GiB

Foto's

De volgende foto laat de grote server verbouwing zien.

Deze foto toont het trekken van een back-up voor de server verbouwing.

Motivatie

Waarom heb ik dit gedaan? Omdat het kan natuurlijk ten eerste. Mijn moederbord heb ik vervangen om meer performance uit mijn RAID kaart en netwerk te persen. Bij mijn RocketRAID is dat goed gelukt:

root@athena:/mnt/archive/common# time dd if=/dev/zero of=/mnt/archive/common/testfile.bin bs=1M count=16000
16000+0 records in
16000+0 records out
16777216000 bytes (17 GB) copied, 372.417 s, 45.0 MB/s

real    6m12.514s
user    0m0.280s
sys     1m13.889s
root@athena:/mnt/archive/common# time dd if=/dev/zero of=/mnt/archive/common/testfile2.bin bs=1M count=16000

16000+0 records in
16000+0 records out
16777216000 bytes (17 GB) copied, 376.388 s, 44.6 MB/s

real    6m19.449s
user    0m0.280s
sys     1m13.721s
root@athena:/mnt/archive/common# 
root@athena:/mnt/archive/common# time dd if=/mnt/archive/common/testfile.bin of=/dev/null
32768000+0 records in
32768000+0 records out
16777216000 bytes (17 GB) copied, 120.17 s, 140 MB/s

real    2m0.174s
user    0m13.793s
sys     1m13.473s
root@athena:/mnt/archive/common# time dd if=/mnt/archive/common/testfile2.bin of=/dev/null
32768000+0 records in
32768000+0 records out
16777216000 bytes (17 GB) copied, 120.065 s, 140 MB/s

real    2m0.074s
user    0m13.569s
sys     1m13.425s

De schrijfsnelheid was nog niet de helft en de leessnelheid was ongeveer een derde. Dus wat dat betreft ben ik er aardig op vooruit gegaan. Maar mijn doorgestuurde NIC is niet sneller te krijgen dan 30 MB/s, dus dat schiet nog niet echt op. Heeft iemand een idee waar die trage performance vandaan komt?

[VorCha]

Ik heb vorige week de host in het datacenter geplaatst/vervangen. Hierbij wat pics voor de beeldvorming.

[Pantagruel]

Mijn duit in 't "Thuis virtualisatie" zakje doen:

Hypervisor

VMWare ESXi 5.0 (binnenkort upgrade richting ESXi 5.1).
Waarom: Bare metal hypervisor die je voor thuis gebruik gratis kunt gebruiken

Hardware

#	Product	Prijs	Subtotaal
1	Intel Xeon E3-1230 Boxed	€ 213,70	€ 213,70
1	Western Digital Blue WD3200AAKS, 320GB	€ 65,58	€ 65,58
2	IBM ServeRAID M1015 SAS/SATA Controller for System x	€ 116,62	€ 233,24
1	Intel Postville X25-M SSDSA2MH080G2C1 80GB	€ 103,08	€ 103,08
2	Kingston ValueRAM KVR1333D3E9SK2/8G	€ 53,55	€ 107,10
1	Mellanox MHEA28-2TC	€ 100	€ 100
1	Supermicro X9SCM-F	€ 182,60	€ 182,60
Bekijk collectie Importeer producten		Totaal	€ 1005,3

De hardware wordt standaard uit de doos ondersteund en het doorsluizen van een PCIe adapter (M1015 of de MHEA28-2TC) is vanwege de Vt-D ondersteuning geen probleem.
Externe datastores zijn er niet. Alle VM's staan op de SSD en de 4 SATA drives zijn gezamelijk een ZFS array (tbv ZFSguru/OpenIndiana).

Op dit moment dient de ESXi install puur als test om te bepalen of het virtualiseren een haalbare optie is. Jammer genoeg is de ondersteuning van Infiniband (IB) onder ZFSguru (FreeBSD 9.x) zeer beperkt en is het toch vooral de bedoeling of ik de ZFS pool over een 20Gbit VMXNET3 verbinding aan een andere VM kan doorgeven (NFS/iSCSI) welke wel in staat is om SMB over IB te doen (linux/Windows Server 2012). Een andere optie is om via een Nexenta/Open Solaris 11/OpenIndiana VM de ZFS pool beschikbaar te maken, maar eerdere test mbv direct geïnstalleerde OS 11/OI installs liet een IB transfer plafond zien van ca. 500~600 MB/sec vanuit een RAM disk (SRP-target).

Energie verbruik kan ik op dit moment niets over zeggen aangezien de 3 kwartjes meter van de Gamma naar "genezijde" is gegaan.

Virtuele machines

OS/Appliance	Functie
OpenIndiana 151a	om SRP target doorvoer te testen
Ubuntu 12.04 LTS	om SRP target doorvoer te testen
ZFSguru	ZFSguru v 0.2.0-beta5, ZFS test VM
ZFSguru	ZFSguru v 0.2.0-beta5, VMXNET3 test VM
Win2008-R2	Win2008 test VM

Foto's

De foto's zijn niet helemaal in overeenstemming met hoe de bak er nu uit ziet, maar van de eerdere 10+ TiB ZFS server build.
De genoemde SSD en de 4x 320 GB SATA drives zijn erbij gekomen om de virtualisatie te huisvesten. Afhankelijk van wat ik met de bak wil start ik ESXi op of de bare-metal ZFSguru installatie.

Front	Zij aanzicht	Close up mobo	Disks

Motivatie

Waarom, omdat het kan en ik op dit moment de goed draaiende ZFSguru installatie niet zomaar over wilde hevelen naar een VM omgeving en het risico lopen dat de ca. 16 TiB data pool het slachtoffer zou worden.

[de echte flush]

Na jullie leuke hardware mijn amateuristisch servertje

Hypervisor

Vandaag een update gedaan van 4 naar ESXi 5.1 en 8GB ram (dank aan rscheper) : de hypervisor is gratis ;-) maar eigenlijk ook gekozen omwille van een korte professionele ervaring met ESXi 4.1

Hardware

(prijzen kloppen natuurlijk niet)

#	Product	Prijs	Subtotaal
1	Kingston DataTraveler G3 8GB Geel	€ 4,67	€ 4,67
1	Seagate Barracuda 7200.9 ST3160812AS, 160GB	€ 111,86	€ 111,86
2	Western Digital Blue WD2500AAJS, 250GB	€ 0,-	€ 0,-
4	Kingston KTM4982/2G	€ 25,95	€ 103,80
1	Intel Core 2 Duo E6550 Boxed	€ 0,-	€ 0,-
1	HP Compaq dc5800 (KK377ET)	€ 0,-	€ 0,-
Bekijk collectie Importeer producten		Totaal	€ 220,33

ESXi is geïnstalleerd op de (toekomstgerichte) 8GB usb stick, om hiervan te booten moest ik ESXi instellen de stick te gebruiken met een MBR table (kan niet booten vanaf GPT)
Verbruikt momenteel z'n 66W, met 2 actieve vm's.
RAM geheugen is het maximum van het bordje, ik had natuurlijk liever meer ;-)
Ik kom van een AMD athlon X2/4GB RAM met ESXi 4, maar daar was ESXi 5.1 niet meer compatibel mee. Voordeel van dit hp bordje is dat alles out of the box werkt. (op die GPT boot na).

Virtuele machines

OS/Appliance	Functie
Freenas	Freenas 8.2 (2*250GB: RDM ging niet, dus als .vdmk gekoppeld en als ZFS mirror opgezet (testje)
UbuntuVPN	Moet fysieke openVPN server vervangen, nog op te zetten
W2008R2	DC (rechten etc ooit nog op te zetten)
W2008R2	experiment WSUS server, ook nog steeds niet opgezet
Win7	Test machine, vooral voor bovenstaande machines te testen

Foto's

let niet op de rommel, de stick heb ik vanonder gewoon in de kast geplakt.

Motivatie

Vooral opgezet om wat te spelen met wsus, domein controller, etc En om te testen of ik men oude freenas server kan vervangen als vm (nu nog een AMD sempron 3100+ met 2GB RAM met een idle verbruik van bijna 80W) maar momenteel gaat dat nog niet gebeuren Desnoods hou ik die apart voor een iSCSI volume... (met ooit nieuwe HW) Had hiervoor een iSCSI gekoppeld aan de ESXi 4 server.

Wensen

- eventueel een upgrade naar een Quad core (Q6600 eventueel Q9xxx) goede upgrade voor prestaties lijkt me.
- prestaties ZFS zien te verbeteren (zonder al te veel upgrades ), als dit lukt en het budget er is twee keer 2 of 3TB steken als ZFS mirror.

momentele prestaties ZFS mirror:
oude freenas (amd sempron):
-> max z'n 232Mbps op het ZFS volume
-> max z'n 500Mbps op een gewoon UFS volume
freenas op de VMware ESXi server:
-> max z'n 185Mbps op het ZFS volume: E1000 nic, de VMXnet3 werkt (nog) niet

[Jeroen V]

Ook mijn bijdrage maar eens leveren aan dit topic.

Hypervisor

Ik heb gekozen voor VMWare ESXi 5.1 aangezien ik dit met grote regelmaat tegenkom op het werk. VMWare heeft naar mijn mening het meeste ervaring met bare metal hypervisors en voor mij het meest geschikt. Ook het feit dat ESXi memory overcommitment heeft maakt de keuze erg eenvoudig. (ik zit op dit moment op zo'n 30% overcommitment zonder dat ik daarvan iets merk)

Hardware

Ik had nog een aantal onderdelen die gebruikt zijn voor de setup. (eigenlijk alleen netwerkkaart en de 400GB schijven (oeps, zie nu dat het 1 x 250GB en 1 x 400GB is)) Verder een nieuwe computer aangeschaft voor de server. Het moederbord heeft een on-board netwerkkaart die ik op dit moment niet gebruik. Ik was oorspronkelijk van plan om deze voor de VPN server te gebruiken, maar daar ben ik vanaf gestapt aangezien L2TP erg gemakkelijk door mijn router door te sturen is. Voordeel is dat ik nu geen Windows server 'naakt' aan het internet heb hangen. Verder heb ik meer dan genoeg aan de 4 NIC's die er nu inzitten.

Ik wilde er graag zoveel mogelijk geheugen in zonder direct aan heel erg dure hardware te moeten, dus ik heb gekozen voor een i5 quadcode op 3.3 GHz met 32GB geheugen. Voor mij meer dan zat, alleen beetje jammer dat er niet meer geheugen bijgeprikt kan worden in de toekomst.

Ik heb een Dell PowerConnect 2724 24 poort GBit switch waarmee de server aan de rest van het netwerk geknoopt wordt. Voor opslag heb ik een Synology 1010+ (5 x 1.5TB) waar de nodige iSCSI targets op staan.

De ESX server heeft vier netwerkkaarten die op de volgende manier worden gebruikt:
1. VM Network
2. iSCSI Network
3. Servers Network
4. Clients Network

De Synology heeft 2 GBit NIC's waarvan er eentje gebruikt wordt voor iSCSI targets, en de andere voor het overige verkeer.

Prestaties zijn op deze manier erg prettig, ik heb wat snelheid op het netwerk niets te klagen.

#	Product	Prijs	Subtotaal
1	Cooler Master CM 690 II Advanced (USB 3.0 version)	€ 101,48	€ 101,48
2	Intel Gigabit CT Desktop Adapter	€ 25,39	€ 50,78
1	Intel PRO/1000 PT Dual Port Server Adapter (2x1000Mbps, PCI-e 4x)	€ 154,50	€ 154,50
2	Samsung SpinPoint T133 HD401LJ, 400GB	€ 0,-	€ 0,-
1	Western Digital Green WD20EARX, 2TB	€ 89,90	€ 89,90
1	Samsung SH-222BB Zwart	€ 13,24	€ 13,24
2	GeIL Evo Corsa GOC316GB2133C10AQC	€ 114,20	€ 228,40
1	Intel Core i5 3550 Boxed	€ 180,-	€ 180,-
1	OCZ ModXStream Pro 500W	€ 56,-	€ 56,-
1	Intel 330 120GB	€ 77,-	€ 77,-
1	MSI Z77A-GD55	€ 119,-	€ 119,-
Bekijk collectie Importeer producten		Totaal	€ 1.070,30

Virtuele machines

De meeste VM's zijn Windows servers die ik gebruik om ervaring met de produkten op te doen. (Licenties zijn overigens netjes gedekt door het MSDN abonnement dat ik zelf heb, handig, geen gezeur met activatie ) Alle VM's opnoemen is wat saai, dus ik zal me beperken tot de 'belangrijke' VM's die erop draaien.

OS/Appliance	Functie
Windows 2008R2 Enterprise	Domain Controller 1, DHCP, DNS, NPS
Windows 2008R2 Enterprise	Domain Controller 2, DHCP, DNS
Windows 2008R2 Datacenter	Cluster Node 1, SQL, DTC
Windows 2008R2 Datacenter	Cluster Node 2, SQL, DTC
Windows 2008R2 Enterprise	SQL Server 2012
Windows 2008R2 Enterprise	TFS Server 2012
Windows 2008R2 Enterprise	Management tools, WSUS, backup
Windows 2008R2 Enterprise	RRAS, standalone
Windows 2012 Standard	Terminal Server
Windows 7 Ultimate	Download machine, algemene client
Debian Linux	Squid, Nagios

Foto's

Binnenkant van de kast, ben geen modder maar toch redelijk netjes dacht ik


De printer, ESX server en NAS (let niet op het stof)


En een screenshot van de client....

Overig

Ik heb gekozen voor het MSI moederbord omdat dit VT-d zou ondersteunen. Helaas lijkt dat niet helemaal lekker te gaan... Nadat ik passthrough voor de onboard netwerkkaart had eengezet liep de machine snoeihard vast. Geen idee of dat ook de directe oorzaak is, maar ik heb VT-d in de BIOS uitgezet en gebruik het dus niet. De onboard netwerkkaart is niet echt nodig (zie boven) dus ik vind het wel best zo en ik heb niet verder gezocht wat het probleem precies is. Een stabiele machine vind ik belangrijker dan het gebruik van een goedkoop netwerkkaartje.

ESX is zelf geinstalleerd op de SSD die erin zit en dat draait prettig. Misschien dat ik dat ooit nog op een USB stick zet maar voor nu is het prima. Verder staat de Windows 7 client, SQL Database en de swap files op de SSD dus de prestaties daarvan zijn prima. Ik heb nog niet veel gemerkt van degradatie van performance (vziw ondersteunt ESXi geen trim commando) Ik ben wel benieuwd of dat zo blijft, maar dat ga ik meemaken

Grootste bottleneck in deze machine zijn de harddisks. Ik merk dat de VM op de SSD altijd ontzettend snel is, maar zodra er meerdere machines vanaf de SATA schijven druk bezig zijn er een behoorlijke degradatie is in performance. (wat ik uiteraard niet vreemd vind) Op het werk ligt nog een 'sloop' server met 6 x 15K SAS schijven die ik op het oog heb. Als ik toestemming krijg dan zou ik die graag in deze machine inbouwen, alleen een goede controller aanschaffen en dan denk ik dat ik redelijk van de SATA bottleneck af ben

Maar voor nu ben ik erg tevreden over deze setup...

Edit: foto's toegevoegd...

[Spekkie88]

Hypervisor

Xenserver 6.2

Hardware

#	Product	Prijs	Subtotaal
1	AMD FX-8350 Boxed	€ 166,70	€ 166,70
1	Gigabyte GA-990FXA-UD3	€ 114,26	€ 114,26
3	Asus EAH5870/2DIS/1GD5/A	€ 0,-	€ 0,-
1	Point of View GeForce GTS450 1024MB GDDR5 PCI-E	€ 0,-	€ 0,-
1	Western Digital Velociraptor WD1500HLFS, 150GB	€ 0,-	€ 0,-
1	Corsair Vengeance CMZ16GX3M2A1866C10	€ 159,80	€ 159,80
1	Samsung SH-222BB Zwart	€ 0,-	€ 0,-
1	Cooler Master Silent Pro Hybrid 850W	€ 0,-	€ 0,-
1	Samsung 830 series 256GB	€ 0,-	€ 0,-
2	Samsung Spinpoint F1 HD502IJ, 500GB	€ 0,-	€ 0,-

Virtuele machines

OS/Appliance	Functie
Windows 7 64-bit	Gaming
Windows 7 64-bit	Gaming
Windows 7 64-bit	Gaming

Foto's

Motivatie

Naast dat ik deze pc gebruik als game pc, leek het me leuk om de mogelijkheid te hebben om deze op te kunnen splitsen zodat er met meerdere mensen tegelijk gegamed kan worden.
Mijn oog viel om die reden al snel op Xen omdat die als enige hypervizor alles kon bieden. Na meerdere opties te hebben geprobeerd (XCP 1.6/xenserver6.1, ubuntu/fedora + xen) beviel XCP/Xenserver me het meest omdat dit een compleet pakket bood zonder dat ik zelf moeilijk moest gaan doen.

Nu heb ik een dualboot tussen mijn main Windows 7 en Xenserver voor als ik meerdere mensen over de vloer heb en samen gezellig een game wil spelen

Edit:
De beloofde foto's!

[ Voor 4% gewijzigd door Spekkie88 op 04-12-2013 16:40 ]

[Nicap]

Ik heb thuis een esxi server staan met wat VM's erop en een Synology NAS. Nou heb ik het idee dat de schijf van de NAS tegen het einde van z'n leven aan loopt. Ik was van plan om een nieuwe NAS aan te schaffen omdat ik de huidige (110j) een beetje traag vond. Nu ik ook de esxi server heb draaien met de apps die eerst op de NAS draaiden(sickbeard en consorten) is de NAS eigenlijk een beetje overbodig. De server staat toch 24/7 aan, dus kan ik net zo goed de server gaan gebruiken voor storage.

Alleen weet ik niet zo goed hoe ik het het beste aan kan pakken. Mijn gedachte was om een vm aan te maken met bijvoorbeeld freenas. Alleen lees ik her en der wel verhalen dat dit niet zo'n beste oplossing is. Maar omdat sickbeard en consorten toch al draaien op een andere vm en ik verder alleen maar storage nodig heb voor de series/films wil ik dus eigenlijk gewoon wat storage toevoegen. Kan ik dan gewoon een vm aanmaken met bijvoorbeeld ubuntu als fileserver?

En dan een andere vraag: ik heb er nu 2 disks in die in totaal 300GB zijn die ik gebruik als local datastore voor de vm's. Ik wil een 2TB drive er bij in zetten die dan als storage moet dienen voor de films, series en iptv-opnames. Hoe pak ik dat het beste aan?

[ Voor 12% gewijzigd door Nicap op 12-11-2013 23:09 ]

[FireDrunk]

Werkt prima hier...

8168 == 8111

http://pci-ids.ucw.cz/read/PC/10ec/8168

[nike]

Hypervisor

Debian Jessie met kvm en virtual machine manager op de desktop xfce4.
Hiermee kan ik ook snapshots maken. alleen als je Jessie heb.
Ik benader de machine vanuit mijn desktop pc met daarop windows 8 met remote desktop. Hierin staan dus alle schermen open.

Hardware

Intel dq77kb met i5 en 16gig men, ssd van 256G en een los usb schijfje als ftp/backup schijf.

Virtuele machines

pfsense 2.2.1 release waarvan 1 nic in bridge stand, dus pfsense krijgt extern ip adres. Hierop draaid squid+guard,dhcp,openvpn,snort

debian wheezy voor een simple webserver,ftp
windows 2008 om te spelen.

Systeem draaid rond de 22w

[ Voor 9% gewijzigd door nike op 25-03-2015 20:24 ]

[SilentDecode]

Intro

Ik heb 2 soorten VM's op mijn server staan;
1. "productie" VM's: Deze draaien dagelijks en zorgen voor allerlei services in en buiten mijn huis.
2. Test omgevingen: Dit staat onder een kopje binnen 'Virtuele machines' en spreekt voor zich.

Hypervisor

ESX 5.5 update 2. Waarom? Ik ben er al erg bekend mee. Het is een lekker licht OS zonder dat je veel prestatieverlies hebt voor de VM's. Betrouwbaar, stabiel, simpel en toch ingewikkeld. Het is makkelijk te schalen en uit te breiden (ondanks dat dat bakken met geld kost). Drivers toevoegen gaat ook lekker makkelijk, ondanks dat je wel Linux kennis moet hebben.

Hardware

- HP Proliant ML150 G6
- 2x Intel Xeon E5540 @ 2,53Ghz (QC's met HT)
- 12x 4GB DDR3-1066Mhz ECC REG Hynix en Samsung (48GB totaal en het maximale)
- Dell PERC6 256MB + BBWC RAID controller (Dell en HP vloekt, I know. Maar ik had deze nog liggen )
- 6x 500GB desktop SATA2 schijven op PERC6 in RAID10
- 1x Samsung 830 Pro SSD 256GB SATA3 op onboard SATA2
- 1x Crucial C300 SSD 256GB SATA3 op onboard SATA2
- 1x Quad NIC Gigabit netwerkkaart PCI-E 4x
- 1x Nvidia GeForce 7 7300GT 256MB (voor wat testing met VT-d)

Totaal energieverbruik

Het energieverbruik van deze server ligt niet denderend hoog (in vergelijking met wat ik gewend ben). Ondanks dat het een redelijk oude server is, verbruikt hij alsnog wel gewoon vol rond de 300 of 350 Watt. Dit met 1 voeding want de RPS optie is duuuur .

Virtuele machines

OS/Appliance	Functie
CentOS 6.5	VoIP server voor een vriend
Ubuntu 14.04.1	Minecraft servertje om wat in te derpen
CentOS 6.6	Nog een minecraft servertje, voor een vriend
Windows Server 2012R2	Folding@Home server voor Dutch Power Cows (6 cores)
Windows XP Pro 32bit	RDP machine voor mijn retro games
Zenoss Core	Monitoring die half af is
Ubuntu 14.04.1	SFTP server
Ubuntu 14.04.1	OwnCloud server
Ubuntu 14.04.1	VPN server
CentOS 6.6	vApp; APC PowerShute Network shutdown (APC SmartUPS controller)
CentOS 5.4 (denk ik)	vCenter Testserver
Windows Server 2008R2	Veeam Backup server
Windows Server 2012R2	Domein controller en DNS server
OS/Appliance Testomgeving	Functie
Proxmox VE	Proxmox
Windows Server 2008R2	Horizon
Windows Server 2012R2	Domain controller
Windows Server 2012R2	Exchange 2013
Windows Server 2012R2	vCenter

Overige apparatuur

Achter mijn server liggen 2 HP Procurve 8 poorts Gigabit switches. Deze zijn heel 'professioneel' aan elkaar gemaakt met tyraps, puur om ze bij elkaar te houden en het makkelijk te maken voor mezelf.

Verder hangt er nog een APC Backup-UPS achter. Deze is helaas smart, dus gooit niet de servers automatisch plat als dat nodig is. Deze is er puur om stroompieken en onzuiverheden uit het stroomnet te pikken en zo nodig stroom bij te leveren. De accu is half naar de maan, dus hij zou het waarschijnlijk maar 5 minuten volhouden. Gelukkig is er bijna nooit stroom uitval bij ons in Winterswijk .

Foto's

Laatste foto is inclusief LackRack, maar het tafeltje is niet hoog genoeg, dus steunt het tafeltje op de server. Dit maakt echter niet uit, want er staat enkel een laptop en een dockingstation op.

Toekomstplannen

Ik ga binnenkort in de server waterkoeling zetten. Dit om hem stiller te maken. De VM die het rekenwerk voor Folding@Home doet, maakt de server nogal lawaaierig. Omdat mijn budget krap is, moet ik mijzelf flink tegenhouden, anders had ik er een custom waterkoeling-set in gezet (zo'n setje van ruim €200).

Verder wil ik hier nog een snellere RAID controller in hebben. Eentje die SATA3 kan en meer poorten heeft dan de huidige.

Motivatie

Deze server is er neergezet om mijn hele herriebakken te vervangen. Eerst had ik een 42U rek op mijn kamer staan, met zo'n 7 machines erin; 2x HP DL380G5, 4x HP DL360G5 en 1x Dell PE2950G1.
Deze is krachtiger, sneller, stiller en fijner om mee te werken. Hij is ook nog eens prima te modden en past makkelijk in een kamer zonder al teveel ruimte beschikbaar te maken.

[ Voor 3% gewijzigd door SilentDecode op 04-04-2015 01:52 ]

[larshack]

Hierbij mijn setup.

Hypervisor

Als basis voor mijn homelab heb ik gekozen voor Hyper-V. Ik heb via school licenties voor Microsoft Windows Server 2012 R2 Datacenter en kan op deze manier "gratis" gebruikmaken van Windows Server.
Via AVMA worden alle VM's met Windows Server 2012 R2 Datacenter en Standard automatisch geactiveerd.

Hardware

#	Product	Prijs	Subtotaal
1	Intel Xeon E5-2603 v3 Boxed	€ 229,20	€ 229,20
1	Supermicro X10SRI-F	€ 304,50	€ 304,50
1	Samsung HD204UI, 2TB	€ 0,-	€ 0,-
1	Seagate Spinpoint M8 ST1000LM024, 1TB	€ 53,95	€ 53,95
1	WD Green HDD, 3TB	€ 97,63	€ 97,63
2	WD Green HDD, 4TB	€ 145,90	€ 291,80
1	WD Green SATA 3 Gb/s WD15EARS, 1,5TB	€ 0,-	€ 0,-
4	WD Red SATA 6 Gb/s WD10EFRX, 1TB	€ 61,84	€ 247,36
1	Fractal Design Define R5 Titanium	€ 106,-	€ 106,-
6	Kingston ValueRAM KVR21R15D4/16	€ 83,01	€ 498,06
1	Dell PERC 6/i met BBU	€ 147,69	€ 147,69
1	Seasonic S12II-Bronze 520W	€ 52,95	€ 52,95
1	Crucial BX100 120GB	€ 62,99	€ 62,99
1	Samsung 850 EVO 250GB	€ 94,46	€ 94,46
1	APC Back-UPS Pro 550 VA	€ 120,-	€ 120,-
Bekijk collectie Importeer producten		Totaal	€ 2.306,59

De gehele setup verbruikt volgens APC PowerChute ongeveer 100 Watt.

Virtuele machines

OS/Appliance	Functie
Windows Server 2012 R2 Datacenter	Domain controller, DHCP en PKI
Windows Server 2012 R2 Datacenter	Domain controller en PKI
Windows Server 2012 R2 Datacenter	Domain controller
Windows Server 2012 R2 Datacenter	Exchange 2016 Mailbox Server
Windows Server 2012 R2 Datacenter	Exchange 2016 Mailbox Server
Windows Server 2012 R2 Datacenter	Exchange 2016 Edge Transport Server
Windows Server 2012 R2 Datacenter	Plex server
Windows Server 2012 R2 Datacenter	SABNZBD, Couchpotato en NZBDrone
Windows Server 2012 R2 Datacenter	Microsoft SQL Server 2012
Windows Server 2012 R2 Datacenter	MySQL server
Windows Server 2012 R2 Datacenter	Microsoft System Center Configuration Manager 2012 R2
Windows Server 2012 R2 Datacenter	Microsoft System Center Virtual Machine Manager 2012 R2
Windows Server 2012 R2 Datacenter	Microsoft Azure pack
Windows Server 2012 R2 Datacenter	Web server (IIS)
Windows Server 2012 R2 Datacenter	Web Application Proxy voor DirectAccess en HTTPS proxyserver
Windows Server 2012 R2 Datacenter	Fileserver
Windows Server 2012 R2 Datacenter	PRTG monitoring
Ubuntu Server 16.04	Minecraft server

Foto's

Plaatjes komen eraan

Motivatie

De hele setup draait sinds vorig jaar september als een zonnetje. De vier 1 TB schijven draaien als RAID-5 set op de Dell controller. De meeste bootdisks van de VM's staan op de SSD van 250 GB doormiddel van deduplication:

Ik gebruik Virtual Machine Manager in combinatie met Azure Pack als lab omgeving voor certificeringen van Microsoft. De gehele omgeving inclusief Exchange wordt gebruikt door familie en vrienden.

[FireDrunk]

Er zijn meerdere optie, maar een bridge is eigenlijk het simpelst. Zoek eerst een guide hoe je een bridge maakt van je lokale LAN (of WLAN) en daarna kan je de virtuele NIC direct op de bridge hangen.

Als je dingen wil weten over Linux Kernel Virtualisatie, kan je beter zoeken op KVM ipv QEMU. Het heet tegenwoordig in de kernel namelijk gewoon KVM, qemu was de oude softwarematige virtualisatie, toen kwam er qemu-kvm (een fork van qemu die Processor assisted virtualisatie ondersteunde), en later is dit weer gemerged in de kernel naar gewoon KVM.

De Userland tools heten nog qemu, terwijl het eigenlijk gewoon KVM is. Toen ik net googlede op QEMU kreeg ik ook een heel aantal resultaten die al veel te oud zijn. Oppassen dus

http://www.linux-kvm.org/page/Networking

Hier staat genoeg over het gebruik van bridges. (TIP: gebruik niet die kvm ifup scripts, maar de "Solution 1" scripts die iets verder staan, en start de bridge altijd. Dat betekend dat de bridge altijd actief is ookal draaien er geen VM's, maar dat kan helemaal geen kwaad).

Voor simpel(er) VM management, kan ik je virt-manager aanraden. Dat werkt toch een stuk makkelijker dan op de command line met qemu klooien. Je hebt er geen hele X11 omgeving voor nodig, je kan virt-manager prima draaien via X-forwarding in SSH.

En dat ziet er zo uit:

[ Voor 6% gewijzigd door FireDrunk op 23-08-2016 08:04 ]

[Basz0r]

Hierbij mijn setup.

Hypervisor

Ik heb een custom build Hypervisor in mijn meterkast draaien voor diverse doeleinden. Als OS heb ik gekozen voor Ubuntu 16.04 LTS. Ik gebruik KVM om te virtualiseren, en bcache voor SSD offloading van de disken die er in zitten. Ook heb ik een 2 port Intel NIC er in geprikt om LACP te kunnen doen naar m'n HP Procurve switch.

Hardware

Het volgende heb ik aan hardware in m'n hypervisor zitten.

#	Product	Prijs	Subtotaal
1	Intel Core i5-4460 Boxed	€ 178,50	€ 178,50
1	Asus H81I-PLUS	€ 67,51	€ 67,51
2	WD Green HDD, 3TB	€ 101,95	€ 203,90
1	Cooler Master Elite 110	€ 39,-	€ 39,-
1	Intel Pro/1000 PT Dual Port	€ 154,50	€ 154,50
1	Silverstone Argon AR06	€ 39,99	€ 39,99
1	Kingston HyperX Fury blu HX313C9FK2/16	€ 76,-	€ 76,-
1	Seasonic G-series 360 watt	€ 59,95	€ 59,95
2	Kingston SSDNow V300 120GB	€ 46,18	€ 92,36
Bekijk collectie Importeer producten		Totaal	€ 911,71

De hardware is opgebouwd uit bij elkaar gezochte onderdelen. Sommigen heb ik tweedehands gekocht en sommigen kwamen uit m'n oude werkstation.

Virtuele machines

Naam	OS	Functie
rtr01	CentOS 7	Default Gateway voor 3 VLANs. Draait ook ZeroTier op voor wat externe machines. En een tunnel naar Hurricane Electric voor IPv6 verkeer.
fs01	CentOS 7	Fileserver. Met btsync draaiende om belangrijke data tussen 3 locaties te syncen.
cgs01	Ubuntu 16.04 LTS	Cargoship VM. Draaien op dit moment 2 containers op dmv. LXC/LXD. Éen met Domoticz en één met unbound en named als fallback voor DNS als m'n router VM niet draait.
dckr01	Ubuntu 16.04 LTS	Docker VM. Hier staan de volgende images op: mailserver, confluence, NGINX proxy, rainloop en phpMyAdmin. Ook draait er een Letsencrypt image op om automatisch certs te genereren voor de web applicaties.

Foto's

Motivatie

Storage

In m'n hypervisor heb ik 2 disken van 3TB zitten en 2 SSD's van 120GB. Beiden setjes draaien in RAID 1. Een klein gedeelte van de SSD's gebruik ik voor het OS. De rest als cache device voor bcache. De disken gebruik ik als backing device voor bcache. Dit verbeterd de performance voor random IO aanzienlijk voor de VM's.

Externe toegang

Op m'n router VM draait ZeroTier met een gesloten netwerk. Deze is oa. gekoppeld aan een DigitalOcean VM, die ik gebruik als SSH jump host. Apparaten die in hetzelfde netwerk zitten (ook dmv ZeroTier) kunnen daarmee verbinden, om naar m'n netwerk thuis toe gaan.

Backups

Alle VM's hebben een cronjob staan met een script wat duplicity gebruikt om back-ups te maken naar een externe locatie. Op die externe host draait ook een duplicity script wat incrementeel back-ups maakt van de btsync directories (voor als er iemand een oepsje maakt in een map met foto's).

Stroom

De hypervisor is aangesloten op een kleine UPS (APC Back-UPS 950VA), evenals de switch en m'n modem. Als de stroom uitvalt neemt apcupsd dit waar en gaat er hopelijk iets in Nagios loeien . Als de UPS bijna leeg is worden alle VM's afgesloten en gaat de hypervisor uit.

De machine schommelt qua gebruik ongeveer tussen 40 á 50 watt aan stroom.

[NL-RaVeR]

Tijd om mijn virtualisatie machine ook maar eens te posten. Hij is bij lange na niet efficient, maar het is wat het is op dit moment. Opmerkingen hoor ik graag

---

Hypervisor

Ik gebruik een custom build van ESXi 6, gebouwd met ESXi customizer. Hierin zit de vsphere web client en drivers voor mijn Areca ARC 1280ML.

Hardware

#	Product	Prijs	Subtotaal
1	Intel Xeon X3430 Boxed	€ 89,-	€ 89,-
1	Intel Server Board S3420GPLX	€ 0,-	€ 0,-
2	HGST Deskstar NAS, 4TB	€ 151,55	€ 303,10
2	Hitachi Deskstar 7K250 160GB , 160GB	€ 0,-	€ 0,-
2	Samsung Spinpoint F1 HD103UJ, 1TB	€ 0,-	€ 0,-
3	WD Green WD20EARX, 2TB	€ 107,69	€ 323,07
1	Areca ARC-1280ML (24x SATA300 RAID, XOR, 256MB, PCI-e x8)	€ 0,-	€ 0,-
1	Cooler Master Real Power Pro 650W	€ 0,-	€ 0,-
2	Crucial MX200 2,5" 500GB	€ 145,43	€ 290,86
1	OCZ Vertex 3 60GB	€ 0,-	€ 0,-
1	Custom Build 24 Bay hotswap case	--	--
4	DDR3-1600 ECC Registered 4GB	--	--
Bekijk collectie Importeer producten		Totaal	€ 1.006,03

Binnenkort is de custom build 24-bay server case af die ik met vrienden heb ontworpen/gemaakt. Huidige kast kunnen helaas geen disks meer bij in. Stroomverbruik weet ik eigenlijk niet precies, maar me jaarafrekening viel niet tegen . Alles werkte eigenlijk out of the box, op de raid controller na. Hiervoor heb ik dus via vsphere customizer drivers geinclude en passthrought werkt nu prima met die kaart

Virtuele machines

OS/Appliance	Functie
Windows 10	RDP, development, downloads en data opslag
CentOS 7	MariaDB database
CentOS 7	Apache/Nginx web server
CentOS 6	Minecraft vanilla server
CentOS 7	Minecraft Tekkit server
Ubuntu 16.04	Pi-Hole DNS server

Foto's

Dit is de huidige kast die dus vervangen gaat worden. Onderaan de foto is het huidige bordje dat in de server zit.

Motivatie

Het is nu voornamelijk een bij elkaar geraapt "zooitje". Dit wordt dus binnenkort en stuk beter als de nieuwe kast arriveerd. Dan wordt de storage ook verder uitgebreid en ga ik de opslag ook regelen onder een ander OS. Verder wil ik ook mijn backups verder automatiseren naar een ander systeem. Momenteel maak ik snapshots van de vm's op een USB disk die aan de server hangt.