Ich habe in Erinnerung, dass eine Verbesserung von XG(S)-PON gegenüber GPON die Latenz im System ist. Aber ich weiß aktuell nicht mehr, wo ich das gelesen habe.
Daher dachte ich zunächst, dass du technisch bereits auf XGS-PON migriert wurdest und davon profitierst. Aber offenbar war die Latenz schon ziemlich gut.
Hast du mal verschiedene Server geprüft?