Bladecenter H - BNT switch config?

[witchdoc]

Weer eens een vraag betreffende networking in het ganse virtualisatie verhaal.

Bij een klant staan 2 Blacecenter H chassis'.
Elk bladecenter is uitgerust met 2 (losse, niet-gestackte) BNT switches. Deze switches zijn elk geuplinked met de rest van het LAN via een static linkagg. Deze static linkagg is (op de LAN kant) getagged met alle vlan's die nodig zijn op de virtuele servers en esx'en. Op de BNT is geen enkele vlan geconfigureerd.


Even de config:

code:

script start "BNT Virtual Fabric 10Gb Switch Module for IBM BladeCenter" 6  /**** DO NOT EDIT THIS LINE!
/* Configuration dump taken 17:40:33 Fri Jun 1, 2011
/* Version 6.5.3, Base MAC address 00:00:00:00:00:00
/c/sys/sshd/on
/c/l2/vlan 1
        def  INT1-INT14 EXT3-EXT9 EXT11
/c/virt/vnic
        on
/c/virt/vnic/port INT1/vnic 1
        ena
        bw 75
/c/virt/vnic/port INT1/vnic 2
        ena
        bw 25
/c/virt/vnic/port INT2/vnic 1
        ena
        bw 75
/c/virt/vnic/port INT2/vnic 2
        ena
        bw 25
/c/virt/vnic/port INT3/vnic 1
        ena
        bw 75
/c/virt/vnic/port INT3/vnic 2
        ena
        bw 25
/c/virt/vnic/vnicgrp 1
        ena                               
        vnicvlan 1000
        failover ena
        addvnic INT1.1
        addvnic INT2.1
        addvnic INT3.1
        addtrnk 7
/c/virt/vnic/vnicgrp 2
        ena
        vnicvlan 1001
        failover ena
        addvnic INT1.2
        addvnic INT2.2
        addvnic INT3.2
        addport EXT10
/c/l2/stg 1/off
/c/l2/stg 1/clear
/c/l2/stg 1/add 1 1000 1001
/c/l2/stg 1/port EXT1/off
/c/l2/stg 1/port EXT2/off
/c/l2/stg 1/port EXT10/off
/c/l2/trunk 7
        ena
        add EXT1
        add EXT2
/c/l2/lldp
        on
/
script end  /**** DO NOT EDIT THIS LINE!

Even kortsluiten: dit werkt! VMware ESX servers die op de blades draaien krijgen met VST de juiste vlan en kunnen communiceren met de rest van het netwerk. Ik snap alleen niet hoe dat komt.

Onder vnicgroup 1 config zie je vnicvlan 1000. Volgens de manual plaats je hiermee de bijhorende vnicgroup in een bepaalde vlan. Vlan 1000 of 1001 echter helemaal niet.
Voor het ganse VST verhaal van VMware is het trouwens ook nodig dat deze vlan tags rechtstreeks door de switch tot op de ESX geraken zodat ESX zelf de vlan tags kan strippen waar nodig.

Waar slaat die vnicvlan dus precies op? Of hoe wordt bepaald in welke vlan de vnics terrecht komen?
Hoe zorg ik ervoor dat b.v. 1 van de esx servers in een andere vlan terecht komt als dit niet met die vnicvlan.

[witchdoc]

Niemand? Dit zou een simpele vlan vraag moeten zijn voor iemand ooit wat speeltijd heeft gehad op zo'n ding.

[Remco]

witchdoc schreef op maandag 18 juli 2011 @ 18:20:
Hoe zorg ik ervoor dat b.v. 1 van de esx servers in een andere vlan terecht komt als dit niet met die vnicvlan.

Je kan toch binnen esx een netwerk aanmaken en daar een vlan tag in meegeven ?
Dan kan je dat netwerk weer aan je vm nic koppelen.

Wijzelf hebben maar 3 vlans, maar laten de vlans regelen door de Cisco switches. Het signaal komt dus untagged aan bij de esxi machine.
Nadeel hiervan is wel dat je dus niet meerdere vlan over 1 nic heen kan zetten.
Maar wij hebben dan ook 10 nics per server en kunnen zodoende het redden.

[ Voor 4% gewijzigd door Remco op 20-07-2011 02:06 ]

[witchdoc]

Remco schreef op woensdag 20 juli 2011 @ 02:04:
[...]

Je kan toch binnen esx een netwerk aanmaken en daar een vlan tag in meegeven ?
Dan kan je dat netwerk weer aan je vm nic koppelen.

Wijzelf hebben maar 3 vlans, maar laten de vlans regelen door de Cisco switches. Het signaal komt dus untagged aan bij de esxi machine.
Nadeel hiervan is wel dat je dus niet meerdere vlan over 1 nic heen kan zetten.
Maar wij hebben dan ook 10 nics per server en kunnen zodoende het redden.

mja, dat was een slecht voorbeeld misschien.. we willen bereiken dat op een blade rechtstreeks een windows of een linux of een ... server kunnen installeren en zorgen dat deze in de juiste vlan terrecht komt.
Ik kan me moeilijk voorstellen dat het strippen van vlan tags op de hosts moet gebeuren in dit geval.

[Remco]

Het kan zijn dat ik je niet helemaal begrijp.
Maar je kan toch binnen vmware meerdere virtual machine netwerken op dezelfde physical nic maken met daarin een eigen vlan id gekoppeld ?

[witchdoc]

Remco schreef op woensdag 20 juli 2011 @ 17:27:
Het kan zijn dat ik je niet helemaal begrijp.
Maar je kan toch binnen vmware meerdere virtual machine netwerken op dezelfde physical nic maken met daarin een eigen vlan id gekoppeld ?

Wie zegt dat ik esx op een blade wil installeren
Mijn issue is dat we nu met erg dure switches te maken die zelf NIKS doen behalve van een fysieke poort 4 virtuele poorten maken.
Zodra ik met die virtuele poorten aan de slag ga is het over en uit met normale vlans als'k het goed zie. Dat vind'k erg raar.

'k Heb ondertussen al wel door dat die vnicvlan een soort QinQ tag is.. je vlans worden in een andere vlan verborgen zeg maar.