A/B-Tests und Statistiklösungen

Question

Ich habe seit Monaten nach einem guten Test-Framework gesucht und nichts gefunden, also habe ich einfach mein eigenes gebaut.

Das ist es, was ich tun möchte:
- beliebige Verhaltensweisen verfolgen (z. B. Anzahl der angesehenen Fotos, Anzahl der geposteten Kommentare)
- die Korrelation zwischen willkürlichen Variablen und diesen Verhaltensweisen zu verfolgen
(z. B.: Wie wirken sich verschiedene Versionen dieser Aufforderung auf die durchschnittliche Anzahl der angesehenen Fotos aus?)

Diese Art von Dingen sollte ein zentraler Bestandteil der agilen Entwicklung sein. Was gibt es da draußen? Ich weiß, dass Google Website Optimizer eine der Antworten ist, aber man kann nur Verhaltensweisen verfolgen, die in einer einzigen "Erfolgsseite" enden.

Es wäre großartig, ein Plugin zu haben, das innerhalb Ihres Codes (in meinem Fall Rails) arbeiten kann und in einen netten gehosteten Dienst mit hübschen Graphen einspeist...

Answer 1

Vielleicht möchten Sie Ihr Problem in Analysen (Impressionen, Aktionen und mögliche In-Page-Ereignisse, Berichterstattung über Ihre Tests) und einen Rahmen für die Bereitstellung Ihrer Variationen unterteilen (wie verwalten Sie x Variationen, sowohl in praktischer Hinsicht als auch in Bezug auf ihre Vorbereitung, müssen Sie Variationen für künftige Referenzen speichern, Tests ein- und ausschalten, die Wirksamkeit Ihrer Tests optimieren usw.). Es gibt eindeutig Überschneidungen, z. B. kann Google Website Optimizer eine schlechte Variation abschalten, sobald es Daten zur Unterstützung hat, aber wenn Sie dies als verschiedene Probleme betrachten, können Sie vielleicht die Google Analytics-Komponente wiederverwenden.

Answer 2

Ja, hier:

http://github.com/paulmars/seven_minute_abs/tree/master