So haben wir getestet
Die vom Ismaninger Netztest-Spezialisten zafaco im Auftrag von connect durchgeführten Tests von LTE-Homespots konzentrieren sich auf das Nutzererlebnis bei Web-Services und Web-TV-Empfang.
Der vorliegende Test von LTEHomespots fand von Montag, dem 20.07., bis Sonntag, dem 16.08.2020, statt. Insgesamt wurden aus diesem Zeitraum 455 524 Messungen bewertet. Um unaufschiebbare Wartungen durchführen zu können, ohne die Testergebnisse zu beeinträchtigen, haben wir ein Wartungsfenster vorgesehen, das täglich zwischen 2.00 Uhr morgens und 6.00 Uhr morgens lag. Messwerte aus diesem Wartungsfenster wurden bei der Bewertung nicht berücksichtigt.
Bei der Auswahl der getesteten Produkte haben wir als Mindestvoraussetzung eine Datenrate von 150 Mbit/s im Downlink definiert. Die gewählten Tarife und die verwendete Hardware sehen Sie in nebenstehender Tabelle. Mit seiner Multi-Play- und Benchmarking-Plattform führt zafaco sowohl leistungsorientierte QoS-Messungen (Quality of Service) als auch anwenderorientierte QoE-Messungen (Quality of Experience) durch.
Da DNS-Auflösungszeiten sich auf eine große Anzahl von Internetdiensten auswirken, erfolgte diese QoS-Messung als eigenständiger Teil unseres Tests. Im Rahmen der DNS-Messung wurden zu jeder Stunde 40 DNS-Requests versendet und die Antwortzeit gemessen. Um DNS-Caching-Mechanismen weitestgehend auszuschließen und Messungen zu den DNS-Servern im Anbieternetz zu forcieren, wurden jede Stunde wechselnd 40 DNS-Requests aus der Top1000-Alexa-Liste für Deutschland bzw. Österreich ausgewählt. Die Liste der Top 1000 URLs wurden einmal pro Woche neu bestimmt und täglich in eine zufällige Reihenfolge sortiert. Zusätzlich haben wir die DNS-Auflösungszeiten bei den Aufrufen der ETSI-Kepler-Referenzseite und bei zehn populären Webseiten aus unterschiedlichen Kategorien erfasst. Zu den QoS-Tests zählte zudem der Aufruf von Gaming-Servern. Dazu wurden im Rahmen eines Testdurchlaufs hintereinander zehn ICMP Echo Requests im Abstand von jeweils einer Sekunde und mit einem Timeout von einer Sekunde verschickt. Ermittelt wurde dann die Zeit bis zum Eintreffen des ICMP Echo Reply. Bei den anwenderorientierten QoEMessungen erfolgten Webseitenabrufe per Browser. Dabei wurde die standardisierte ETSI-Kepler-Referenzseite von fünf nationalen und vier internationalen Webhosting-Anbietern abgerufen und auf TransportlayerEbene die HTTP-Ladezeit gemessen. Zusätzlich erfolgte die Messung der Ladezeiten von unterschiedlichen, häufig genutzten Webseiten auf Applikationslayer-Ebene. Zur Ermittlung der Qualitätskennwerte setzen wir die beiden nach Marktanteilen führenden Browser in Europa ein: Firefox und Chrome. Die Messungen der WebServices erfolgten abhängig vom Anbieterprodukt und vom OTT-Anbieter über IPv4 oder IPv6.
Für die Photobook-Messungen nahmen wir pro Land Uploads zu jeweils zwei populären Fotobuchanbietern vor. Dabei wurden mehrere Bilder innerhalb von 30 Sekunden hochgeladen und so die durchschnittliche Upload-Zeit pro Bild ermittelt. Ließ sich innerhalb von 30 Sekunden keine Bilddatei vollständig an den Fotobuchservice übertragen, wurde der Upload als nicht erfolgreich gewertet. Der Web-TV-Test führte Messungen im Over-the-Top-Ansatz bei unterschiedlichen Video-Content-Providern durch. Für den Abruf eines Videos kam je nach Voraussetzung auch hier Firefox oder Chrome zum Einsatz. Die Messungen wurden nach Möglichkeit mittels adaptive Streaming durchgeführt. Hierbei fand typischerweise der MP4-Video-Container mit H.264-Codierung und MP3-, AAC- oder OGG-Audio Codec Verwendung. Die Qualitätsanalyse erfolgte nach dem Verfahren Perceptual Evaluation of Streaming Video Quality (PEVQ-S) der Firma Opticom. Die neueste PEVQ-S-Version unterstützt dabei neben H.265 auch den Kompressionsstandard VP9 sowie UHD-Auflösungen. Eine detaillierte Dokumentation des umfangreichen Testverfahrens steht für alle Interessenten unter www.zafaco.de/de/whitepaper zum Download bereit.