Wieso erhalte ich unterschiedliche Performance-Daten mit verschiedenen Speedtests?

Jeder Speedtest-Provider hat seine eigene Messmethodik und Datenratenberechnung. Leider gibt es aktuell keine einheitliche Beschreibung für einen Performance-Test. cnlab vergleicht periodisch die öffentlichen Ergebnisse von diversen Speedtest-Providern mit den eigenen Messungen, um eine Vergleichbarkeit der Performance-Tests abzuschätzen.

Wie viele Messungen werden durchgeführt und wie gut ist die statistische Aussagekraft der Ergebnisse?

Es werden täglich zwischen 10'000 und 20'000 Tests von 3'000 bis 4'000 verschiedenen Nutzern durchgeführt. Nach Ankündigungen in den Medien oder bei Veränderungen der Angebote sind bis zu 10x mehr Messungen zu beobachten. Bei statistischen Auswertungen werden die Messungen pro Nutzer bzw. Internetanschluss zusammengefasst. Die Resultate von Testern, welche sehr viele Messungen durchgeführt haben, fallen somit nicht stärker ins Gewicht als Resultate von Testern, welche nur wenige Messungen durchgeführt haben. Bei den statistischen Auswertungen wird stets darauf geachtet, dass zum betrachteten Effekt jeweils mindestens 100 Werte vorliegen.

Die Messungen führen aus zwei Gründen zu eher pessimistischen Werten: Einerseits testen Nutzer vor allem dann, wenn Sie das Gefühl haben, dass Leistungsprobleme vorliegen, andererseits testen sie vor allem während «Hochlast-Perioden». Basierend auf Angaben von Cablecom konnte 2007 verifiziert werden, dass in Regionen mit anerkannt schlechter Leistung etwa 59 Messungen pro 100 Kunden, in Regionen mit guter Leistung hingegen nur 27 Messungen pro 100 Kunden zu beobachten sind. Es wird deutlich, dass in Netzen mit Leistungsproblemen mehr Kunden messen.