Du nutzt aktuell ziemlich sicher noch den Telekom-Anschluss. Die PPPoE-Zugangsdaten werden bei der Telekom ja standardmäßig gar nicht geprüft (Easy Login), dementsprechend läuft das auch mit den Daten von o2. Da zählt nur, auf welchen Vertrag das Modem registriert ist.
Und ich vermute mal, dass du du das Glasfaser-Modem erst bei o2 aktivieren können wirst, nachdem der Telekom-Vertrag abgeschaltet ist. Oder halt du benutzt ein anderes Modem, das noch nicht auf einen Vertrag aktiv ist.
Ansonsten zum Speedport generell: Der Internetzugang wird wahrscheinlich auch mit o2 funktionieren, weil dort genau wie bei der Telekom PPPoE mit Dual Stack genutzt wird. Telefonie könnte evtl. eher ein Problem sein.