Der finale Report zum Web Analytics Shootout 2007 von StoneTemple  ist nun fertig gestellt und veröffentlicht worden. In dem Report wurden insgesamt 7 verschiedene Web Analytics-Tools gleichzeitig auf mehreren Webseiten installiert und miteinander verglichen. Der finale Report enthält übrigens alle Daten, die bereits im Zwischenbericht aus dem Mai diesen Jahres enthalten waren.

Folgende Keyfindings zeigt der Report auf:

1. Verschiedene Tool installiert auf der gleichen Webseite liefern unterschiedliche Ergebnisse.
2. Die größte Fehlerquelle liegt in der Installation der Software.
3. Zwei weitere Faktore, die zu Unterschieden in den Messungen führen, sind die Position des JavaScript-Codes auf der Webseite und die Implementierung der Software, bzw. die Definition des Herstellers wie Besucher gezählt werden.
4. PageViews bieten weniger Varianz in den Messungen als andere Metriken.
5. Varianz und Fehler spielen vor allem beim Vergleich unterschiedlicher Websites und unterschiedlicher Hersteller eine Rolle.
6. Um Ungenauigkeiten zu reduzieren sollte man versuchen mit weiteren Tools zu kalibrieren.
7. Man sollte sich auf die Themen konzentrieren, in denen Web Analytics Tools stark sind und diejenigen vernachlässigen wo sie weniger gut drin sind. Besonders geeignet sind Webanalyse-Tools für folgende Aufgaben:
   

   A/B und multivariantes Testing
   Optimierung von PPC-Kampagnen
   Optimierung von SEO-Kampagnen
   Segmentierung von Traffic

8. Die Tools sind nicht exakt aber die Relationen und Trends sind Gold wert.

Des weiteren geht der Report in einem Abschnitt auf die Genauigkeit, bzw. Ungenauigkeit von Web Analytics-Tools ein und erklärt welche Faktoren für Ungenauigkeiten verantwortlich sind und zeigt Szenarien auf in denen Genauigkeit eine Rolle spielt (weitere Beispiele im kompletten Report):

• Unternehmen A übernimmt Unternehmen B und erhofft sich aus dem Traffic weiteren Umsatz pro Besucher. Wenn die Webseite von B nun ein Tool einsetzt, welches um 50% höhere Zahlen liefert als A, dann ist es schwer eine Vorhersage über den erwarteten Umsatz auf Basis der Erfahrungen von Webseite A zu treffen.
• Beim Wechsel der Web Analytics Anbieters kann es zu enormen Schwankungen in den Zahlen kommen. Wenn nun das Management hohes Vertrauen in die Analytics-Zahlen hat, so könnte dieses durch die plötzlichen Veränderungen verloren gehen.

Der Report ist sehr lesenswert, da er aus der Praxis kommt. Viele Hersteller haben die Untersuchung zwar tatkräftig unterstützt, aber letztendlich wurde der Vergleich von Praktikern gemacht, die tagtäglich mit den Tools zu kämpfen arbeiten haben.

Vielen Dank an Eric und sein Team

About Patrick Ludolph

Ich beschäftige mich privat und beruflich mit der Suchmaschinenoptimierung. Viele kleinere private Projekte nutze ich zum testen verschiedener Maßnahmen, um diese dann später in realen Projekten einsetzen zu können.

View all post by Patrick Ludolph