Thema "Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole" in Störungen im Mobilfunk-Netz

Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Tue, 12 Sep 2023 20:17:52 GMT

Wie ich darauf komme: Probleme mit meinem IPv6 IPSEC VPN, das auch in der Vergangenheit schon empfindlich auf Probleme mit PMTUD/fragment loss war. Insofern habe ich als erstes da angefangen zu suchen.

Wireshark dump beim Aufbau IPv6 basiertes IPSEC VPN scheint zu zeigt, dass die ESP pakete nicht durchgehen sobald sie fragmentiert sind. Habe dann aber nicht mehr genauer untersucht.

Statdessen Tests für ICMP(v6) gefahren:

Der Test [1] zeigt, das bei IPv6 Fragmente über das mobilfunknetz (cellular) nicht funktionieren.

Bei IPv4 scheint die PMTUD über das Mobilfunknetz nicht zu gehen, siehe [2].

Cross-Check 1: die Ergebnisse (Daten im Mobilfunknetz) sind sowohl bei auf meinem Mobiltelefon (iOS), wie auch Laptop (Windows 11) mit Daten-sim (beide Vodafone, beides der gleiche Vertrag) identisch.

Cross-check: mit einem alternativen Festnetz-internet (VF Kabel Internet, via WLAN, FritzBox) sind die Ergebnis auf den beiden Seiten [1] und [2], also für IPv6 wie auch IPv4, unauffällig, alles geht, keine Fehlermeldungen. Getestet ebenfalls auf dem gleichen Laptop und dem gleichen Telefon, nur eben WLAN an und Cellular abgeschaltet.

=> Schlussfolgerung: es ist kein Windows problem, kein Problem mit einem einzelnen System

Zusammenfassung aus den Tests [1] und [2]:

ipv6 - pmtud ; ipv6 - fragments ; ipv4 - pmtud ; ipv4 - fragments
Mobilfunk Daten: OK NOT OK NOT OK OK

Festnetz Internet: OK OK OK OK

Kann die Ergebnisse jemand unabhängiges bestätigen?

[1]

http://icmpcheckv6.popcount.org/

meldet:

"✗ The request timed out. Looks like IP fragments failed to be delivered to you."

[2]

http://icmpcheck.popcount.org/

meldet:

"✗ The request timed out. Looks like the ICMP Path MTU message was not delivered to you."

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

thomasschaefer — Wed, 13 Sep 2023 07:01:00 GMT

Das Blockieren fragmentierter IPv6 Pakete kann ich leider bestätigen. Ich habe dadurch auch VPN Probleme.

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Wed, 13 Sep 2023 10:49:59 GMT

Hallo Thomas,

danke fürs bestätigen der IPv6 Problematik. Damit wäre VF dann nicht RFC8504 konform, das klingt bedenklich.

Zitat aus der RFC:

   Nodes MUST always be able to send, receive, and process Fragment
   headers.

Ich frag mal Tobi ob er das fixen kann...

Zum zweiten Thema, Thomas, kannst Du zufällig auch das PMTUD Problem auf v4 bestätigen?

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

thomasschaefer — Wed, 13 Sep 2023 18:44:23 GMT

Bei v4 ist alles grün.

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Thu, 14 Sep 2023 06:28:16 GMT

Danke Thomas. Kannst Du noch verraten auf welchem / was für einem system getestet? Bei mir bei IPv4 PMTUD weiterhin rot.

Probiere auch nochmal, in meinem Umfeld einen dritten Tester zu organisieren.

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Thu, 14 Sep 2023 14:48:05 GMT

Ergänzung, Ergebnisse aus weiteren Tests mit Bekannten und Kollegen:

Telekom-Netz (DE) mit Google Pixel:

IPv6: PMTUD OK ; Fragments OK

IPv4: PMTUD NOT-OK ; Fragments OK

Fyve (VF Netz, DE), iPhone 13 mit aktuellestem iOS :

IPv6: PMTUD OK ; Fragments NOT-OK

IPv4: PMTUD NOT-OK ; Fragments OK

Verizon (US, von innerhalb der USA), mit einem Google Pixel:

IPv6: PMTUD OK ; Fragments NOT-OK

IPv4: PMTUD OK ; Fragments OK

Vodafone (DE), iPhone Telefon: (gleiches Setup wie bei mir, aber anderer Nutzer, gleibes Ergebnis wie bei mir (s.o.)

IPv6: PMTUD OK ; Fragments NOT-OK

IPv4: PMTUD NOT-OK ; Fragments OK

Vodafone (DE), Andoid Telefon:

IPv6: PMTUD OK ; Fragments NOT-OK

IPv4: PMTUD NOT-OK ; Fragments OK

Scheint also so, als würde die Telekom (DE) zumindest v6 komplett richtig machen.

IPv6 Fragments kommen hingegen in keinem der Vodafone Netze durch.

Und PMTUD IPv4 kann scheinbar nur die USA (wild guess, die machen kein CG NAT?).

Re: Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black...

Chr1ssy — Fri, 15 Sep 2023 16:08:59 GMT

Hi @poeggi,

gern schauen wir uns das mit Dir nochmal gemeinsam an.

Meld Dich dazu bitte nochmal über folgenden Kontaktmöglichkeiten.

LG Chr1ssy

Re: Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black...

poeggi — Mon, 18 Sep 2023 17:14:30 GMT

Hallo Chr1ssy,

nimm es mir bitte nicht übel, aber diese standardisierten Texte/Antworten aus der Konserve helfen nun wirklich niemandem.

Die Hotline ist chronisch überlastet und bei den zitierten "Kontaktmöglichkeiten" gibt es auch sonst keinen Kanal, über dem man differenziert ein Fehlerbild beschreiben könnte.

Insofern habe ich dieses Forum hier primär zur Dokumentation und beschreibung genutz und dann ein Ticket in der Technik der Firmenkundenbetreuung auf gemacht, über die Firma in der ich Arbeite und zu der auch das Mobiltelefon gehört.

Hoffnungsweise funktioniert der Kanal (TBC).

Denn eines ist sicher, das IPSEC via v6 auf Mobil nicht funktioniert, das ist ein echtes Problem das sicherlich nicht nur ich und Thomas haben.

Zusätzlich vermutlich noch diverse Kunden bei denen das Fehlerbild weniger eindeutig ist, z.B. der aufbau des Tunnels aus unklaren Gründen sehr lange dauert... bis z.B. nach timeout ein Fallback auf ein anderes Protokoll passiert.

Re: Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black...

R4mona — Mon, 18 Sep 2023 17:23:24 GMT

Hi @poeggi,

vielen Dank für Deine Rückmeldung.

Standard können wir gar nicht. Jede unserer Antworten ist mit ganz viel Liebe verfasst. Hier können wir Dich leider nicht unterstützen, da ein Zugriff auf Dein Kundenkonto nicht möglich ist. Das tut uns wirklich leid.

Natürlich hoffen wir sehr, dass andere User:innen hilfreiche Tipps Dich parat haben. Sollte dem nicht so sein, weißt Du ja, wie Du uns über die anderen Kontaktkanäle erreichen kannst.

Viele Grüße
R4mona

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Thu, 28 Sep 2023 06:08:58 GMT

Update:

Ticket im Geschäftskundensupport ist eröffnet.

Die Technik VF sagt, der Fehler ist reproduzierbar und eingekreist (damit dann auch bestätigt, würde

ich verstehen).

Es wird wohl gerade mit dem/den Hersteller/n (der vermeintliche die Probleme auslösenden Netzwerkkomponenten) gesprochen.

Hört sich erstmal gut an!

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Thu, 28 Sep 2023 06:11:04 GMT

Update 2:

Stand 28.09.2023 8:10Uhr ist bei mir das IPv4 PMTUD Problem nicht mehr reproduzierbar.

Kann das jemand bestätigen? IPv6 fragment delivery weiterhin N.I.O., aber IPv4 PMTUD durch CGNat scheinbar gefixt.

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Fri, 20 Oct 2023 11:14:25 GMT

Hallo in die Runde,

stand heute sagt VF das IPv6 Fragment Thema sei auch gefixt. IPv4 PMTUD schon seit letztem Monat.

Ich bin gerade im Ausland und kann nicht testen, kann das hier jemand bestätigen?

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Wed, 15 Nov 2023 08:43:12 GMT

Update: IPv6 fragments Problem weiterhin nicht gelöst. Liegt laut support VF ist das Thema aktuell bei Ericsson in bearbeitung.

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Tue, 19 Dec 2023 19:29:07 GMT

Update: Stand heute ist das Problem weiterhin "beim Hersteller" in Bearbeitung.

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Wed, 03 Apr 2024 19:48:54 GMT

Kurzes update Ende März / Anfang April.

Nachdem IPv4 PMTUD ja recht schnell nach erstellen des cases beim support gefixt wurde, ist IPv6 fragements immer noch im Fluss.

Anfang Februar bin ich auf eine neue SIM Karte umgezogen.

Ich hatte danach zwischenzeitlich einige Male einzelne "grün" beim IPv6 Fragments test[1], das war aber nie wirklich dauerhaft/stabil.

Tests mache ich aktuell auf einem GigaMobil M Vertrag (mit echter SIM) mit einem iPhone 14 pro, Tests laufen in Hamburg.

Nun habe ich gestern die Option 5G+ im "MeinVodafone" portal aktiviert.

Seitdem war es in diversen Tests über die letzten 24h der IPv6 fragments tests immer und dauerhaft Grün.

So könnte man vermuten, dass ein Teil der Infrastruktur mitlerweile sauber ist?

Ich habe 5G+ jetzt wieder abgeschaltet. Aktuell ist auch direkt nach abschalten der Option und Neustart des Telefons der IPv6 fragments test immer noch "grün". Ggf. braucht das aber etwas.So schaue und schreibe ich morgen nochmal was der Stand ist.

Aber: eine andere VF Karte (echte SIM) / und anderes Telefon (iPhone15Plus, Vodafone FamilyCard M) zeigt aber weiterhin Rot. Tests im gleichen Haushalt, ebenfalls Hamburg.

@thomasschaefer oder andere Leser, kannst Du/könnt Ihr eventuell nochmal sagen was der aktuelle Stand bei Dir/Euch ist - bzw. ob die Verhaltensänderung nach anschalten der 5G+ option reproduzierbar ist?

[1]

http://icmpcheckv6.popcount.org/

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Thu, 04 Apr 2024 11:11:17 GMT

Update 4.4.2024:

Nach einigem SIM-Karten getausche und Optionen aktivieren/deaktivieren kann ich folgendes konstatieren:

- die Option "5G+" scheint ein zuverlässiger workaround, ist sie aktiv, funktioniert die IPv6 fragment delivery immer

- einmal für eine SIM Karte/einen Vertrag aktiviert, funktioniert IPv6 fragment delivery, egal mit welchem Gerät
(Ich habe die Sim-Karte in anderem Handy und im Laptop getestet)

Interessant dabei:

* Ich konnte im Field-test mode des iPhone [0] nachvollziehen, dass es nicht an der verwendeten Zelle liegt
(Konkret, in der gleichen Zelle eingeloggt, geht es mal und beim nächsten mal eingeloggt geht es nicht,
ebenfalls verwendetes Band und Bandbreite sind wie man es erwarten würden unerheblich)

* ob man dann aber wirklich 5G verwendet, oder das Telefon auf LTE begrenzt, macht keinen Unterschied,
Ist für eine SIM die Option "5G+" gesetzt, geht IPv6 auch dann fehlerfrei, wenn man Mobil auf LTE/4G begrenzt

* auch ohne die "5G+" Option funktioniert die IPv6 fragment delivery teilweise, teilweise aber eben auch nicht.
Das entscheidet sich scheinbar "zufällig", jeweils beim Anmelden (getestet durch: Flugmodus An, Flugmodus aus)

* die Quote "Funktioniert" zu "Funktioniert Nicht" liegt bei ca. 1:3
(meine Stichprobe ist klein, also sehr ungenau)

* funktioniert es einmal, funktioniert es immer

Bedeutet - in Teilen des VF Netzes läuft alles richtig - und man braucht technisch auch kein 5G.

Hat jemand eine Idee wie/wo man weiter suchen könnte?

[0]

*3001#12345#* --> RAT/ "Serving Cell Info"

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Thu, 04 Apr 2024 12:50:37 GMT

Update 4.4. pt2:

Wahrscheinlichkeit doch eher 50:50 das IPv6 Fragments gehen, ohne die Option als workaround.

Aber es zeichnet sich folgendes ab:

Im Fall IPv6 Fragments "GRÜN" / es geht:

Verwendetes IPv6 Prefix/IP meines Gerätes ist: 2a00:20:700f:*::/64 -oder- 7013 -oder- 7019 ... (niedrig)

Erster antwortender HOP (#3) bei einem Traceroute ist: 2a00:0:0:bd0a::2

Fall IPv6 Fragments "ROT" / es geht NICHT:

Verwendetes IPv6 Prefix/IP meines Gerätes ist: 2a00:20:7041:*::/64 -oder- 7051 -oder- 7053 ... (hoch)

Erster antwortender HOP (#3) bei einem Traceroute ist: 2a00:0:0:bd0b::2
(dahinter sind wieder alle HOPs gleich)

Scheint also ein Teil des Netzes läuft über einen router, da ist mitlerweile alles i.O,
ein anderer Teil läuft über einen anderen (2a00:0:0:bd0b::2) - bei dem fehlt ein update/fix/config.

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

thomasschaefer — Thu, 04 Apr 2024 19:08:37 GMT

Ich bekomme aktuell grün. (Adresse aus Bereich 2a00:20:c28a:....) Mein Test auf MTU-1500 ist auch positiv.

Ich sehe in letzter Zeit selten Probleme. Einzig im Ausland fällt Vodafone etwas auf - wenn ich dort die MTU (mit gesetzten df-bit) teste, ist diese regelmäßig kleiner als im Inland und auch kleiner als bei den Wettbewerbern. Solange aber Path MTU Discovery zu funktionieren scheint, gibt es keinerlei Probleme mit den Anwendungen.

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

poeggi — Thu, 04 Apr 2024 19:21:58 GMT

Danke für das Update. MTU, PMTUD und generell auch alles was IPv4 angeht scheint mir auch seit längerem stabil/normal.

Mir scheint das einzige verbliebene Problem das der IPv6 Fragments zu sein. Und das scheint s.o. an einzelnen routern zu hängen... insofern wäre ich sehr interessiert an der Frage ob es bei Dir auch am ersten HOP hängt... bzw. sich über mehrere Zyklen einbuchen ins Netz router (und damit fehlerbild/funktion) stabil sind?

Betreff: Probleme mit mobilfunk datennetz? IPv6 und IPv4 fragments / MTU / PMTUD / ICMP black hole

nico22de — Thu, 25 Apr 2024 14:47:04 GMT

Für mich macht die 2 nach dem c den Unterscheid. 2a00:20 ist ja Vodafone, danach kommt der Core-Standort: 70 Hannover altes Netz (mit den bekannten MTU-Problemen), 72 Hannover 5G-Core ohne die MTU-Probleme. Wird bei dir mit c28a und c0xx sicher ähnlich sein.