NUC waar Unify Controller op draait hangt indien client DL't

[NeFoRcE]

Dag!

Er is iets heel raars aan de hand hier.

Ik heb 4 accesspoints in/om huis. Een NUC in de meterkast waar DSMRreader op draait EN Unify Controller.

Er zijn 26 clients connected hier in huis. Als ik met m'n macbook 13GB zipfile download, valt na 2 minuten ongeveer m'n controller uit (dat zie ik als notificatie op home assistant). En inderdaad, de NUC is niet meer te bereiken.

Ik ga dit nog verder uitzoeken, maar hoe kan dit? Het is toch niet zo dat die NUC alle data (die 13 gig) verwerkt en zich verslikt? Wat raar dit.

[MasterL]

Is dit geen toeval? Kun je dit reproduceren?
Kijk de traffic gaat niet door jouw controller heen dus de utilisatie van de access points zou daarvoor niks uit mogen maken.

[NeFoRcE]

Nee, geen toeval helaas.

Op twee apparaten ping ik -t, m'n NUC. Gaat hele tijd goed. Zodra ik dan van een willekeurig wifi-apparaat een grote file download, bijv; https://testfile.org/

dan hangt direct m'n ping.

[lier]

Tja...is wat lastig te bepalen obv de huidige info. Kan je een netwerkschema maken (wat is waaraan gekoppeld)? En wat doet de NUC in dit verhaal (functioneel)?

[NeFoRcE]

Per AP hangen ongeveer 4-8 clients aan. Heb bij 2 wel heel veel TXretries. Maar dat komt wellicht door minder goed bereikende clients (birdhouse camera bijv). Dat vind ik nog niet zo heel interessant eigenlijk, tis meer dat die NUC dus totaal onbereikbaar wordt als ik download...

M'n macbook en Surface, en telefoon hangen aan de AP benedenverdieping.\

videotje van het gebeuren:

YouTube: unify controller stuck

[ Voor 7% gewijzigd door NeFoRcE op 20-02-2024 12:45 ]

[MasterL]

Oh maar dit verschijnsel is helmaal niet raar (youtube video). Heeft ook niks te maken met de Unifi controller maar simpelweg met een lijn die (over)belast is. Met andere woorden je hebt te weinig bandbreedte.

[lier]

MasterL schreef op dinsdag 20 februari 2024 @ 15:16:
Oh maar dit verschijnsel is helmaal niet raar (youtube video). Heeft ook niks te maken met de Unifi controller maar simpelweg met een lijn die (over)belast is. Met andere woorden je hebt te weinig bandbreedte.

Wat heeft de maximale WAN throughput (of de berperking ervan) te maken met het feit dat zijn Controller op zijn NUC omvalt? Tenzij al het verkeer via de NUC loopt?

Wel ben ik het met je eens dat ICMP verkeer, omdat het een lagere prioriteit heeft, verdwijnt ten koste van het "download verkeer".

[ Voor 12% gewijzigd door lier op 20-02-2024 15:23 ]

[NeFoRcE]

Het is wel raar toch? Het wordt namelijk alleen maar raarder, want;

- Als ik dus iets groots download op m'n laptop (niet op desktop, dus echt alleen wifi), dan:

- Pingt mijn NUC niet meer
- Ga ik fysiek naar de NUC met scherm etc, dan kan ik gewoon inloggen, heb ik internet, kan ik pingen naar bijv. m'n andere NUC
- Kan ik accesspoints pingen
- Zie ik in TOP en BMON helemaal niets raars/geks
- Merk ik niks aan de nuc.

Maar toch;

- Kan ik vanaf welk apparaat dan ook niet meer bij de NUC: Unify Controller, DSMR Reader, Pingen, SSH'en. Niks.


Pauzeer ik de download;
- Alles werkt weer als een zonnetje...


Schiet mij maar lek...

-------------
edit;

ik ben wat verder, ik heb de unify service gestopt. Download hervat, en nu kan ik 'm nog steeds benaderen. Dus het lijkt in de Unify Controller zelf te zitten. Ik ga even verder zoeken...

[ Voor 14% gewijzigd door NeFoRcE op 20-02-2024 15:34 ]

[MasterL]

lier schreef op dinsdag 20 februari 2024 @ 15:20:
[...]

Wat heeft de maximale WAN throughput (of de berperking ervan) te maken met het feit dat zijn Controller op zijn NUC omvalt? Tenzij al het verkeer via de NUC loopt?

Wel ben ik het met je eens dat ICMP verkeer, omdat het een lagere prioriteit heeft, verdwijnt ten koste van het "download verkeer".

Ik heb het niet over WAN throughput maar over WIFI throughput. Ik heb het vermoedde dat TS een ping laat lopen (naar zijn NUC) over WIFI terwijl hij/zij over hetzelfde WIFI netwerk een grote file download. Hetzelfde zie je ook bij een 10Gbit netwerk, als je deze dicht trekt en een ping naar wat dan ook zul je ook timeouts zien.

[lier]

Eens @MasterL, maar dat verklaart nog niet de:

NeFoRcE schreef op dinsdag 20 februari 2024 @ 11:34:
Als ik met m'n macbook 13GB zipfile download, valt na 2 minuten ongeveer m'n controller uit (dat zie ik als notificatie op home assistant). En inderdaad, de NUC is niet meer te bereiken.

En van bovenstaande expliciet: "valt na 2 minuten ongeveer m'n controller uit".

[laurens0619]

Maar is dat een gevalletje van verkeerde conclusie trekken?
Als je het apparaat niet meer kan pingen betekent dat niet dat het de controller uitvalt.

Er is geen verbinding meer vanaf het apparaat naar de controller. Dat kan door een omvallende controller komen maar ook een probleem in de verbinding er naartoe

[MasterL]

lier schreef op dinsdag 20 februari 2024 @ 15:40:
Eens @MasterL, maar dat verklaart nog niet de:


[...]


En van bovenstaande expliciet: "valt na 2 minuten ongeveer m'n controller uit".

Gokje... Als TS zijn NUC (bedraad) aansluit op 1 switch, het device waar home assistant op draait op dezelfde switch aansluit dat deze melding zich niet zou voordoen. Er zit ergens in zijn netwerk een bottleneck die zich manifesteert bij een flinke belasting (lees grote download). Dat dit niet gebeurt na 2 seconde (down/upload van 10 MB) maar wel met een down/upload van 20 GB (10min??) is natuurlijk niet zo raar. Timeout values enzo

[MasterL]

laurens0619 schreef op dinsdag 20 februari 2024 @ 15:43:
Maar is dat een gevalletje van verkeerde conclusie trekken?
Als je het apparaat niet meer kan pingen betekent dat niet dat het de controller uitvalt.

Er is geen verbinding meer vanaf het apparaat naar de controller. Dat kan door een omvallende controller komen maar ook een probleem in de verbinding er naartoe

Exact dit!

[NeFoRcE]

Zie m'n vorige post, als ik de unify controller uitzet, blijft de nuc wel benaderbaar. En 2 minuten is blijkbaar toch wat overdreven, want het is bijna instant dat de nuc niet meer bereikbaar is als ik de download aanzet.

Ik zal nog even een casus proberen;

Unify controller aan, wifi download starten, kijken of nuc te benaderen is vanaf de desktop pc (dus bypass wifi).

[MasterL]

Kun je eens een tekening maken hoe de boel met elkaar verbonden is?

[Dracula]

MasterL schreef op dinsdag 20 februari 2024 @ 15:54:
Kun je eens een tekening maken hoe de boel met elkaar verbonden is?

En check je uplink poorten van je switch naar de AP's en de NUC om te zien of die niet "vol" zitten tijdens die acties.

Check ook even of je wel de juiste snelheden op de poorten ziet, misschien is er wel een kabel rot oid

[laurens0619]

Als je de NUC niet meer kan pingen tijdens de download, kun je dan nog wel een ander IP pingen die op dezelfde switch als de NUC aangesloten is?

[NeFoRcE]

Mensen, het is - zoals het nu lijkt - opgelost.

sudo service stop unify, en daarna weer starten heeft het blijkbaar opgelost. Dit was nadat ik dit probeerde;
NeFoRcE in "NUC waar Unify Controller op draait hangt indien client DL't"

Raar, want een server herstart, wat al 4x gebeurd is ofzo heeft het niet verholpen. Vermoedelijk toch een loopissue ofzo in de unifycontroller?

Het blijft vreemd, maar dit was de truck dus;

code:

sudo service stop unify
sudo service start unify

Ik houd het in de gaten!

[EverLast2002]

NeFoRcE schreef op dinsdag 20 februari 2024 @ 16:04:
Mensen, het is - zoals het nu lijkt - opgelost.

sudo service stop unify, en daarna weer starten heeft het blijkbaar opgelost. Dit was nadat ik dit probeerde;
NeFoRcE in "NUC waar Unify Controller op draait hangt indien client DL't"

Raar, want een server herstart, wat al 4x gebeurd is ofzo heeft het niet verholpen. Vermoedelijk toch een loopissue ofzo in de unifycontroller?

Het blijft vreemd, maar dit was de truck dus;

code:

sudo service stop unify
sudo service start unify

Ik houd het in de gaten!

Aparte conclusie/fix.....
Hoe pas je dit dan toe in praktijk?

[NeFoRcE]

EverLast2002 schreef op dinsdag 20 februari 2024 @ 16:24:
[...]

Aparte conclusie/fix.....
Hoe pas je dit dan toe in praktijk?

Hoe bedoel je?

Ik vermoed dat de unify controller software hing, ik heb daar oprecht geen verklaring voor. Toen de nuc wel benaderbaar is via ssh (Dus download uit), heb ik middels SSH die commando's uitgevoerd (dit kan dus ook als je rechtstreeks inlogt op de nuc middels muis/toetsenbord).

Ik dacht altijd dat een reboot van het systeem hetzelfde deed, maar blijkbaar is een service stop/start toch anders? Ik kan er niet de vinger opleggen, daarom blijf ik het even in de gaten houden door af en toe de download maar aan te zwengelen.

Blijft een vreemd issue in ieder geval!

[laurens0619]

Correlation does not imply causation

Ik krijg toch sterk het gevoel dat het toeval is dat het na die sudo restart werkt maar dat het er los van staat...
Tijd zal het leren.

Tegelijk het is Unifi. Als er 1 product die dit gedrag bij een download voor elkaar zou moeten krijgen dan is het wel Unifi

[ Voor 26% gewijzigd door laurens0619 op 20-02-2024 16:36 ]

[Dracula]

NeFoRcE schreef op dinsdag 20 februari 2024 @ 16:31:
[...]


Hoe bedoel je?

Ik vermoed dat de unify controller software hing, ik heb daar oprecht geen verklaring voor. Toen de nuc wel benaderbaar is via ssh (Dus download uit), heb ik middels SSH die commando's uitgevoerd (dit kan dus ook als je rechtstreeks inlogt op de nuc middels muis/toetsenbord).

Ik dacht altijd dat een reboot van het systeem hetzelfde deed, maar blijkbaar is een service stop/start toch anders? Ik kan er niet de vinger opleggen, daarom blijf ik het even in de gaten houden door af en toe de download maar aan te zwengelen.

Blijft een vreemd issue in ieder geval!

Dus eigenlijk heb je de "gouden rule" niet toegepast?

Did you try to restart the system?



Nu maar hopen dat het "maar" een hangende Unifi controller was in niet iets anders.

[ Voor 5% gewijzigd door Dracula op 20-02-2024 16:35 ]

[EverLast2002]

NeFoRcE schreef op dinsdag 20 februari 2024 @ 16:31:
[...]
Hoe bedoel je?

Wanneer je grote bestanden gaat downloaden stop je handmatig de Unifi Controller.
Download klaar, start Unifi.
Dat begrijp ik uit je "oplossing".

[NeFoRcE]

Dracula schreef op dinsdag 20 februari 2024 @ 16:35:
[...]


Dus eigenlijk heb je de "gouden rule" niet toegepast?

Did you try to restart the system?



Nu maar hopen dat het "maar" een hangende Unifi controller was in niet iets anders.

ja dat heb ik dus wel, heb wel 5x m'n nuc herstart. Dat is dus ook zo raar.

En ja, of ik begrijp jullie verkeerd, het zal het tijdstip zijn, maar dat was de oplossing ja. Zodra de nuc weer toegankelijk was, unify gestopt en gestart, en dat was het.

Anyway, het blijft iets waar ik niet de vinger op kan leggen. Dat frustreert mij...