Level 3 (Transit) storing?

[Gijs007]

Beste mede tweakers, ik zie bij verschillende datacentra in de VS een storing met de verbindingen die via Level 3 lopen.

Zijn er meer mensen die hier last van hebben?

[C0nscript]

yup, verschillende sites kan ik niet bereiken. Twitch bijvoorbeeld.
Sommige mensen (waaronder ik) kunnen geen ffxiv spelen: https://www.reddit.com/r/ffxiv/comments/3jo2f4/rip_eu/


https://www.allestoringen.nl/ geeft ook vaak een indicatie van services welke minder bereikbaar zijn.

[ Voor 23% gewijzigd door C0nscript op 04-09-2015 23:42 ]

[Wolfwood]

Ik ken de details niet, maar ik denk het wel. Bv Twitch is blijkbaar onbereikbaar voor iedereen uit Europa.

https://www.reddit.com/r/...2nh/problem_loading_page/

[ Voor 56% gewijzigd door Wolfwood op 04-09-2015 23:42 ]

[DumbAss]

Ah, vandaar. downforeveryoneorjustme.com en isup.me waren allebei down

[Gijs007]

Wel raar dat het zolang duurt.. Zou verwachten dat de meeste datacentra automatisch overschakelen naar een andere transit provider.

[DumbAss]

Ik had net heel even connectie... maar het is weeral voorbij

[Gijs007]

Ja klopt, heb veel packetlos op het moment 98%+ en als de pings doorkomen dan zijn ze ook hoger dan normaal.

[filenox]

C0nscript schreef op vrijdag 04 september 2015 @ 23:41:
yup, verschillende sites kan ik niet bereiken. Twitch bijvoorbeeld.
Sommige mensen (waaronder ik) kunnen geen ffxiv spelen: https://www.reddit.com/r/ffxiv/comments/3jo2f4/rip_eu/


https://www.allestoringen.nl/ geeft ook vaak een indicatie van services welke minder bereikbaar zijn.

Allestoringen.nl is ook plat hier

[MrMonkE]

Ja, er is iets goed mis.
Duurt al sinds 23:10 ofzo

[Azhrarn]

Vanuit Belgie met telenet loopt het mis vanaf Telia link. Dus niet Level 3...
Er is iets serieus mis...

[Gijs007]

Inmiddels heb ik hier weer verbinding.

[MrMonkE]

Zou het...

[filenox]

Azhrarn schreef op vrijdag 04 september 2015 @ 23:59:
Vanuit Belgie met telenet loopt het mis vanaf Telia link. Dus niet Level 3...
Er is iets serieus mis...

Om naar Twitch.tv te gaan geraak ik tot hier (Belgie + Telenet)

5  ae52.bar1.brussels1.level3.net (212.3.238.129)  11.418 ms  55.806 ms  16.032 ms
6  ae-126-3512.edge3.amsterdam1.level3.net (4.69.162.174)  17.079 ms
   ae-124-3510.edge3.amsterdam1.level3.net (4.69.162.166)  15.416 ms
   ae-123-3509.edge3.amsterdam1.level3.net (4.69.162.162)  17.853 ms
7  * * *

[Azhrarn]

Het is dus zeker nu.
BGP problemen met LEVEL 3 wereldwijd...

http://seclists.org/nanog/2015/Sep/129

[Verwijderd]

Hier ook, kreeg een paar meldingen van Pingdom die mijn servers vanuit de US niet meer konden bereiken.

[smiba]

Ervaar hier ook problemen met sites zoals blog.mozilla.org, aan een traceroute te zien dat hij inderstaad stopt na edge3.amsterdam1.level3.net

[Azhrarn]

De mannen van seclist zeggen dat Level 3 waarschijnlijk globally broken is en omdat Level3 een Tier 1 provider is, geeft dat wel wat shit... BGP implementaties zouden redundant moeten zijn... ZOU
Weer een voorbeeld van theorie en praktijk.

[Verwijderd]

smiba schreef op zaterdag 05 september 2015 @ 00:12:
Ervaar hier ook problemen met sites zoals blog.mozilla.org, aan een traceroute te zien dat hij inderstaad stopt na edge3.amsterdam1.level3.net

Die gaat hier inmiddels niet meer over Level3:

Tracing route to blog.mozilla.org [104.130.89.232]
over a maximum of 30 hops:

  1    <1 ms    <1 ms    <1 ms  192.168.4.1
  2     6 ms     6 ms     6 ms  10.254.137.1
  3    15 ms     8 ms     9 ms  ht-rc0001-cr102-xe-0-3-3-0.core.as9143.net [213.51.186.178]
  4    11 ms    11 ms    52 ms  asd-tr0610-cr101-ae5-0.core.as9143.net [213.51.158.102]
  5    12 ms    11 ms    12 ms  213.46.182.89
  6    11 ms    12 ms    12 ms  84-116-130-126.aorta.net [84.116.130.126]
  7    11 ms    11 ms    11 ms  84.116.135.182
  8    17 ms    12 ms    13 ms  ae-15.r02.amstnl02.nl.bb.gin.ntt.net [80.249.208.36]
  9    13 ms    13 ms    13 ms  ae-3.r23.amstnl02.nl.bb.gin.ntt.net [129.250.2.158]
 10   106 ms   105 ms   106 ms  ae-6.r23.asbnva02.us.bb.gin.ntt.net [129.250.6.176]
 11   106 ms   106 ms   106 ms  ae-0.r22.asbnva02.us.bb.gin.ntt.net [129.250.3.84]
 12   111 ms   112 ms   111 ms  ae-8.r23.nycmny01.us.bb.gin.ntt.net [129.250.2.148]
 13   133 ms   127 ms   128 ms  ae-1.r20.chcgil09.us.bb.gin.ntt.net [129.250.2.166]
 14   128 ms   129 ms   128 ms  ae-1.r05.chcgil09.us.bb.gin.ntt.net [129.250.2.25]
 15   128 ms   129 ms   128 ms  ae-0.rackspace.chcgil09.us.bb.gin.ntt.net [157.238.64.42]
 16     *        *        *     Request timed out.
 17   132 ms   132 ms   132 ms  173.203.0.131
 18   124 ms   124 ms   123 ms  coreb-core2.ord1.rackspace.net [184.106.126.131]
 19   128 ms   128 ms   129 ms  f5-3-2-core4.ord1.rackspace.net [50.56.6.87]
 20   124 ms   124 ms   124 ms  104.130.89.232

Trace complete.

[smiba]

Zonet gecheckt en het laad weer, maar hier dan nog steeds over Level3. Maakt de boel wel erg traag

C:\Users\Bart>tracert blog.mozilla.org

Tracing route to blog.mozilla.org [104.130.89.232]
over a maximum of 30 hops:

  1    <1 ms    <1 ms    <1 ms  192.168.2.254
  2    68 ms    23 ms    22 ms  static.kpn.net [195.190.228.105]
  3    24 ms    23 ms    23 ms  nl-asd-dc2-git-cr04.kpn.net [213.75.1.83]
  4    35 ms    23 ms    34 ms  nl-asd-dc2-ice-ir01.kpn.net [213.75.1.82]
  5    32 ms    23 ms    32 ms  asd2-rou-1022.NL.eurorings.net [134.222.93.138]

  6    24 ms    23 ms    23 ms  asd2-rou-1043.NL.eurorings.net [134.222.48.223]

  7    33 ms    30 ms    30 ms  ae9.edge3.Amsterdam1.level3.net [213.244.164.205]
  8     *        *        *     Request timed out.
  9   129 ms   130 ms   129 ms  4.71.248.54
 10     *        *        *     Request timed out.
 11   126 ms   125 ms   126 ms  50.56.6.255
 12   125 ms   126 ms   125 ms  corea-core2.ord1.rackspace.net [184.106.126.127]

 13   121 ms   131 ms   120 ms  f5-3-1-core4.ord1.rackspace.net [162.209.19.251]

 14   132 ms   132 ms   135 ms  104.130.89.232

Trace complete.

[ Voor 135% gewijzigd door smiba op 05-09-2015 00:20 ]

[filenox]

developer.apple.com komt er ook niet meer door, zware tijden, zware tijden...

[AmbroosV]

GTT lag er ook uit, op exact hetzelfde moment, hop van EU naar US lukte ook niet. Die zullen iets samen met Level3 doen vermoed ik. Sync.com ging daardoor bijvoorbeeld niet.

[filenox]

We zijn nu weer een uur verder en de problemen zijn nog steeds niet opgelost. Dit gaat Level3 de verzekeringsmaatschappij toch bakken geld kosten, niet?

[ Voor 12% gewijzigd door filenox op 05-09-2015 01:28 ]

[MrMonkE]

Ligt eraan wat de SLA is.
0.1% van een jaar is 8 uur en 3 kwartier.
Dus als je 99.9% uptime garandeerd is dat 8 uur en 3 kwartier per jaar .
Ik weet niet wat hun SLA's zijn maar ik verwacht niet dat er veel bloed zal vloeien.

Er zijn in een SLA allerlei randvoorwaarden aan verbonden aan downtime maar mensen staren zich vaak stuk op die 99.9%

[ Voor 20% gewijzigd door MrMonkE op 05-09-2015 10:35 ]

[WhatsappHack]

Apart, heb hier vanuit San Jose echt werkelijk niets van gemerkt. o0
Al wist ik niet eens van de storing af, dus het zou best eens kunnen dat onze routes direct aangepast zijn via HE of ChinaNet... Niets merken == niets tracen, dus kan 't moeilijk zeggen; maar normaliter forceren we Level3 als primair.

Apart dit, of er is voor ons echt geen probleem geweest met Level3; of het is me echt compleet voorbij gegaan.

[Gijs007]

Is de oorzaak van de storing eigenlijk al bekend?

[abaart]

Kan het kloppen dat deze storing nog steeds gaande is? Heb hier vanaf een KPN pijp grote moeite met het laden van sites uit de US. Traceroutes houden op bij:

code:

6  asd2-rou-1043.nl.eurorings.net (134.222.48.210)  7.722 ms  10.737 ms
    asd2-rou-1043.nl.eurorings.net (134.222.48.223)  7.187 ms
 7  ae9.edge3.amsterdam1.level3.net (213.244.164.205)  13.522 ms  15.081 ms  13.441 ms
 8  ae-34-80.car4.washington1.level3.net (4.69.149.134)  98.154 ms  95.844 ms  92.566 ms
 9  ae-34-80.car4.washington1.level3.net (4.69.149.134)  93.182 ms  91.431 ms  91.665 ms
10  * * *