Experimentieren und-prüfung: A Primer
Diese Stelle ist eine Grundierung auf die reizvolle Welt der Tests und Experimente (A / B, Multivariate, und einen neuen Begriff von mir: Erfahrung Testing). Es gibt eine Menge über das Internet über die A / B und Multivariate Tests, aber ich hoffe, in diesem Beitrag ist es, Ihnen einige Gründe um Bedeutung und dann eine Sicht auf jede Methode zusammen mit ein paar Tipps.
Ich, die Experimente und Tests während meiner letzten Rede vor dem Gipfel Emetrics und hier ist der Text von der Folie:
- Experiment oder Go Home:
- Kunden schreien unsere Probleme (wenn sie anrufen oder uns), die Hündin, aber nur selten Lösungen
- Unsere Chefs sind immer der Meinung, dass sie die Nutzer der Seiten, und sie wollen Website-Design (die alle von uns umgehend umsetzen!)
- Die phänomenale Erfahrung Website ist heute morgen altbackenem
- 80% der Zeit, die Sie / wir sind falsch, was der Kunde will / erwartet, von unserer Seite Erfahrung
Das letzte ist schwer zu schlucken, denn nach allem, was wir sind voll von uns. Aber die Realität ist, dass wir nicht unsere Website des Kunden, sind wir zu nah an das Unternehmen, seine Produkte und Websites. Experimente und Tests helfen uns herauszufinden, wir falsch sind, schnell und immer wieder, wenn Sie daran denken, dass ist eine großartige Sache für unsere Kunden und für unsere Arbeitgeber.
Experimente und Tests, die langfristig an die Stelle der traditionellen Art und Weise die Sammlung qualitativer Daten auf unserer Website Erfahrungen wie Usability Lab. Usability (im Labor oder in einem Heim oder remote) ist groß, aber wenn unsere Kunden wie unsere Websites zu surfen in ihrer Unterwäsche, dann wäre es nicht toll, wenn wir tun könnten, Benutzbarkeit auf sie, wenn sie in ihrer Unterwäsche?
Es ist wichtig zu erkennen, dass Experimente und Tests klingt groß und komplex, aber es ist nicht. Wir sind glücklich, leben zur Zeit, wenn es um Möglichkeiten, die es uns ermöglichen, sich so tief und so breit wie wir wollen, und die Kosten nicht prohibitiv. Es gibt drei Arten von Tests, die am häufigsten auftreten (die ersten beiden sind).
A / B-Tests: In der Regel ist dies eine allumfassende Kategorie, scheint stellvertretend für alle Arten von Tests. Aber A / B-Tests ist im Wesentlichen Prüfung von mehr als einer Version der Web-Seite. Jede Version der Web-Seite in der Regel einmalig erstellt und Stand-alone. Das Ziel ist es, zu versuchen, zum Beispiel, drei Versionen von der Homepage oder ein Produkt oder die FAQ-Seite und sehen, welche Version der Seite besser. Fast immer in A / B-Tests sind Sie ein Mess-Ergebnis (klicken Sie Thru auf der nächsten Seite oder Umwandlung usw.). Wenn Sie nichts anderes tun, sollten Sie A / B-Tests.
Wie kann man A / B-Tests: Sie können einfach Ihre Designer / Entwickler erstellen Versionen der Seite und in Abhängigkeit von der Komplexität der Web-Plattform können Sie die Seiten und messen. Wenn Sie können nicht testen sie gleichzeitig setzen sie eine Woche nach der anderen und versuchen, für externe Faktoren, wenn Sie können.
- Pro tun A / B-Tests:
- Dies ist vielleicht die billigste Art und Weise getestet wird, da Sie Ihre vorhandenen Ressourcen und Tools
- Wenn Sie noch nicht alle Tests ist dies eine gute Möglichkeit, einfach und los geht's, Ihre Organisation und wirklich Spaß haben
- Mein Tipp ist, ersten Mal haben Sie diese Menschen setzen (wo) und Pick-Gewinner, werden Sie überrascht sein,
- Es ist schwierig, alle die externen Faktoren (Kampagnen, Suche Verkehr, Pressemitteilungen, Saisonalität) und so werden Sie nicht 100% sicher, der die Ergebnisse (die 70% Vertrauen in die Ergebnisse und Entscheidungen zu treffen)
- Es ist die Begrenzung in der Art der Dinge, die Sie testen können, nur einfache Sachen und in der Regel ist es schwierig, zu erkennen, Zusammenhänge zwischen den Elementen Sie testen
Con's zu tun A / B-Tests:
Multivariate Tests: Derzeit cool Kind auf den Block, viel Hype, viele Buzz. In A / B Sie hatte, um drei Seiten. Nun stell dir vor "Modularisierung"? Ihre Seite (ihn in Stücke) und die Möglichkeit, nur eine Seite, aber sie zeigen, welche Module dynamisch auf der Seite, wo sie zeigen, und zu dem die Verkehrsdaten. Dann können die, die zu einem komplexen mathematischen Motor, wird Ihnen sagen, nicht nur, welche Version der Seite gearbeitet, aber auch Zusammenhänge.
Zum Beispiel für mein Blog kann ich schaffen "modulesâ" der Kern-Inhalt, den Kopf oben, und jedes Element der rechten Navigation (Seiten, Kategorien, Links, Suche usw.). In einem multivariaten Test konnte ich jede einzelne Stück um und sehen, die man am besten funktioniert.
- Pro tun Multivariate Tests:
- Doing Multivariate turbocharges Ihre Fähigkeit zu tun, sehr viel sehr schnell für ein paar Gründe
- Es gibt freie Tools, wie die Google-Website-Optimierungstool oder bezahlten Werkzeuge wie Offermatica, Optimost, und SiteSpect Wer kann Ihnen helfen, sich sehr schnell durch die Veranstaltung von der Funktionalität der Ferne ( "Think-ASP-Modell) wie Inhalt, Attribute Test, Analysen, Statistiken.
- Sie müssen nicht auf Ihre IT-Development-Team. Alles, was sie zu tun haben, wird ein paar Zeilen JavaScript-Code auf der Seite, und sie fertig sind. Dies ist ein awesome Nutzen, da die meisten der Zeit, dass ist eine große Hürde.
- Es ist ein kontinuierlicher Lernprozess Methodik
- Con's zu tun Multivariate Tests:
- Das alte Sprichwort Computer gilt, vorsichtig von GIGO (Müll rein, Müll raus). Sie müssen noch eine saubere Pool von Ideen, die aus den bekannten Kunden Schmerzpunkte oder strategischen Unternehmensziele zu erreichen. Es ist leicht zu optimieren crap schnell.
- Website Erfahrungen für die meisten Websites sind komplexe Multi Seite Angelegenheiten. Für eine E-Commerce-Website ist das typisch für einen Eintrag zu einem erfolgreichen Kauf auf rund 12 bis 18 Seiten, für eine Support-Seite, noch mehr Seiten (wie wir Thrash um eine Antwort zu finden!). Mit Multivariate Sie sind nur eine Seite zu optimieren und so optimiert kann es nicht spielen eine Rolle bei der großen Endergebnis, nur der erste Schritt oder zwei.
Die meisten gar Multivariate aber bewusst seine Grenzen (und ja die Lieferanten werden Ihnen sagen, dass sie alle Arten von Dingen in der gesamten Website Erfahrung, bringen Sie es mit einem Körnchen Salz und einige Zeit in Anspruch nehmen, zu verstehen, was genau das bedeutet).
Erleben Sie Testing: Neue Begriff geprägt haben, dass ich, um die Art der Prüfung, wo haben Sie die Möglichkeit, die gesamte Website Erfahrungen der Besucher mit der Fähigkeit Ihrer Website Plattform (ATG sagen, Blue Martini etc). Sie können nicht nur ändern, was auf der einen Seite sagen, oder die linke Navigation oder ein Stück Text auf jeder Seite, sondern Sie können alle Dinge, über die gesamte Erfahrung auf Ihrer Website.
Zum Beispiel können Sie sagen, verkaufen Computer-Hardware auf Ihre Website. Dann mit dieser Methode können Sie Ihre Erfahrungen mit der Website, auf Ihre Website ist segmentiert von Windows-und Macintosh-Versionen der Produkte, eine andere Erfahrung, wo die Seite ist von segmentierten Aktuelle Kunden und neuen Kunden und anderen, wo die Seite ist lila mit weißer Schrift ohne Linke Navigation und lächelnde Babys statt Produkt-Box-Aufnahmen.
Testen Sie mit Erfahrung eigentlich nicht haben, um drei oder vier Seiten, sondern mit Hilfe Ihrer Website-Plattform können Sie einfach zwei oder drei persistente Erfahrungen auf Ihren Webseiten ein und sehen, welche Ihren Kunden am besten reagieren. Da jeder Analytics Tools, die Sie verwenden die Daten für alle drei ist die Analyse der gleichen Sie Zeit.
- Pro tun Erfahrung Testing:
- Das ist Nirvana. Sie haben die Fähigkeit zu testen, auf Ihre Kunden in ihren Heimatländern (Think Unterwäsche) und sammeln Daten, die am ehesten widerspiegeln ihre wahren Gedanken.
- Wenn Sie qualitative Methoden integriert werden können wörtlich lesen, ihre Gedanken über die Erfahrung.
- Sie bekommen fünf bis zehn Mal mehr Ergebnisse erzielen als jede andere Methode
- Mit der Erfahrung zu tun Testing:
- Sie brauchen eine Website-Plattform, unterstützt Erfahrung Tests (zB ATG unterstützt diese)
- Es dauert länger als die beiden anderen Methoden
- Die meisten definitiv mehr Potenzial
Erfahrungen Prüfung ist sehr eine Absichtserklärung, sondern sind immer in und eher früher als später die aktuelle Ernte von Lieferanten wird auch in diesem Raum auch.
Vereinbaren? Ablehnung? Counter Forderungen? Bitte teilen Sie Ihre Rückmeldung über Kommentare.













































22. Mai 2006 an 13:59
Experimentieren und-prüfung: A Primer von Avinash Kaushik ...
Avinash Kaushik hat eine sehr gute Nachricht für die verschiedenen Arten von Tests können Sie tun, um Pull metrics von einer Website. Hier ist mein nehmen - Avinash denkt, 80% der Zeit, dass wir falsch sind, was der Kunde will ... ...
22. Mai 2006 an 14:01
Recht gut nach, ich kommentierte sie Webmetricsguru.com. Fragen, wie Analytics benötigen, um sich an Individualisierung.
Wir kommen an den langen Schwanz der Suche, wo auch jeder sehen unterschiedliche Suchergebnisse für dieselbe Abfrage (basierend auf, wer sie sind und wo sie sich befinden).
In Web-Analytics, wenn eine Seite zeigt eine andere Seite (eine für den Kunden "on the fly"), basierend auf, wer sie sind - wie wird die Analytik sind die Unterschiede?
22. Mai 2006 an 22:53
Marshall: Vielen Dank für Ihre Kommentare ....
Viele verschiedene Analytics Tool kann nun diese ganz einfach. Die Herausforderung besteht darin, dass wir die Vorausschau zu wissen, was wir möchten. Normalerweise können Sie entweder Cookies oder URL-Parameter-Werte, dass ein Analytics-Tool wird automatisch abholen und dann können Sie analysieren.
Zum Beispiel können Sie sich http://www.kaushik.net/avinash und auf der Grundlage der Sie kamen Stichwort (oder Kampagne) können Sie sehen:
http://www.kaushik.net/avinash?key=marshall
http://www.kaushik.net/avinash?key=marshall-is-great
Jetzt können Sie sehen, verschiedene Content-on-the-fly je nachdem, was "Schlüssel" Sie kam und meine Analytics-Tool kann jeder Maßnahme KPI vorstellbar, dass sie jetzt hat die Schlüssel-Wert.
23. Mai, 2006 at 19:37
Sehr feine Post, Avinash. Vielen Dank für die ausführliche Erklärungen.
Wie Sie bittet um Feedback, hier geht:
Sowohl Labor-Tests (z. B. für Usability) und transparente Web-Test (A / B, multivariate, usw.) haben ihren Platz. Test Lab hat viele Vorteile, darunter die Fähigkeit zu zeigen, UI / Usability-Probleme, die sich nur schwer Menge mit Web-Analytics. Ebenso, A / B und multivariate Tests sind sehr starke quantitative Instrumente zeigen, dass Benutzer Einstellungen, die einfach nicht gemessen werden kann in einem Labor getestet.
Zum Beispiel, in dem ein Benutzer in einem Labor-Test zu entscheiden, die Förderung attraktiver ist nicht zuverlässig ist aus vielen Gründen (Hawthorne-Effekt, für ein). Aber fragen Nutzer "in the wild", indem sie Angebote in einem A / B-Tests, wenn sie nicht wissen, dass sie sich auf die Probe gestellt, und sie stimmen mit ihren Geldbeutel. Dies ist der springende Punkt, was Marketing-Experimenten zeigen, dass die qualitative Usability-Forschung nicht.
Es gibt nichts von Natur aus mehr oder weniger schwer zu kontrollieren ist mit einem A / B-Test vs multivariaten Test. Der Schlüssel ist, um zufällig Zuweisen von Besuchern zu der Gruppe A gegen die B-Gruppe.
Eine weitere Möglichkeit, sich auf: Wenn A / B-Tests konzentriert sich auf einer Website-Element (dh ein Produkt Bild), dann multivariaten Test konzentriert sich auf mehrere Elemente (Produkt-Bild plus Überschrift). Und eine schnelle Notiz ... Terminologie im Bereich der experimentellen Gestaltung, werden diese so genannte multifaktorielle Tests. Also, wenn Sie "multivariate" oder "multivariablen", oder "multifaktorielle" im Kontext von Web-Test-Anbieter, ist es nützlich zu beachten, dass sie im Wesentlichen alle die gleichen Prozess.
Dies hat nichts zu tun mit einem multivariaten Test werden, und alles zu tun, mit der Innovationen, die von den Herstellern von Ihnen genannten. Mehr Informationen auf den Punkt: das härteste, was über die A / B oder multivariaten Tests Wechsel Inhalt - Anzeigen Version A1B1 einer Seite an einen Benutzer, und gleichzeitig zeigen, A1B2-Version von dieser Seite auch an einen anderen Benutzer. Je mehr Faktoren Sie gleichzeitig Prüfungen (unterschiedlichen), die entscheidend den Inhalt Umschalten wird.
Nun, ja und nein. In einigen Organisationen, instrumentiert Seiten mit JavaScript jedes Mal, wenn Sie testen wollen, ein neuer Bereich ist die IT-Entwicklung. [Bitte beachten Sie, dass ich frei zugeben, meine Vorurteile hier: mein Unternehmen das Produkt ist das einzige, das wirklich die aus der Gleichung, weil es nicht JavaScript-Tagging.]
Was schließlich die Erfahrung Test, was Sie artikulieren klingt viel, wie die Personalisierung mit einem experimentellen Komponente geworfen in. Neben ATG Dynamo, Microsoft Commerce Server und WebLogic IBM auch vereinfachte Formen dieser.
Nochmals vielen Dank Avinash, und herzlich willkommen auf blog-o-Bereich! :)
Dave @ SiteSpect
23. Mai, 2006 at 22:12
Dave,
Vielen Dank für die enorm bereichern den Wert meiner ursprünglichen Nachricht, indem Sie Ihre Kommentare. Ich habe mehr gelernt, wie ich bin mir sicher, dass auch andere Leser.
Ich habe mich persönlich und aktiv beobachtet, die Hawthorne-Effekt und damit bin ich voreingenommen Test-und speziell Erfahrung prüfung (die nicht so viel, wie die Personalisierung setzen zufällig zugewiesen Menschen in zwei oder mehr "kontrolliert und verschiedene" Erfahrungen auf der Website und zu sehen, wie die Erfahrung führt besser gegen Preset Ziele).
Es ist nicht perfekt, aber wir können nicht nur die Maßnahme Umbau und Einnahmen geben, sondern auch Dinge wie qualatitive Aufgabe Vervollständigung und Zufriedenheit für diese Erfahrungen. Es ist nicht perfekt, aber in meinen Augen ein großer Kompromiss zwischen die jemand in und ihnen $ 250, um durch eine Seite VS machen, ohne die Teilnehmer wissen.
Auf keinen Fall ist Usability Lab über, nicht von einer Strecke der Phantasie, aber wie Sie sehen können, bin ich schwindlig auf die Möglichkeiten der Erfahrung und der Prüfung der Erkenntnisse, die sich aus, dass.
24. Mai 2006 an 16:24
Sorry, nur festgestellt, mein Fehler ... in meinem letzten zu Absatz muss ich sagte: "IBM WebSphere, WebLogic nicht (sorry BEA).
Dave
20. Juni, 2006 at 06:29
Vergessen Sie nicht, mit A / B-Tests, die Sie testen können bestimmte Elemente einer Seite nicht als eine ganze Seite. Zum Beispiel, Test zwei Varianten einer Überschrift, senden Sie bitte eine% der Menschen auf die Version A und divert% des Verkehrs auf die Version B. den Rest des Verkehrs zu Ihrer Gruppe.
19 Juli, 2006 at 10:31
[...] Bevor wir beginnen, möchten Sie vielleicht auf diese sehr aufschlussreich Artikel über die Experimente und Tests. [...]
31. März 2007 bei 03:52
Web Analytics ...
Derzeit Phoenix.edu Tracking Weekly Besucher zählt (einschließlich der Nutzer durch die eCampus) Täglich phoenix.edu führen Täglich zählt insgesamt Web führen zählt Daily Aktie (Phoenix ... ....
31. März 2007 um 20:40
Web-Design und der wissenschaftlichen Methode ...
Einige der Science Fair Experimenten effektiv gezeigt, dass die Ergebnisse waren nicht intuitiv in der gleichen Weise, die Analyse des Nutzerverhaltens können Highlight für uns manchmal unerwartete und nicht-intuitive Auswirkungen von Vorlagen zur Auswahl.
Ein guter Wissenschaftler geht davon nichts und Tests alles! Sollte ein guter Web-Designer nicht weniger?
------
Update: Eine meiner Lieblings-Blogs zu diesem Thema, Occam's Razor by Avinash Kaushik, hat eine wunderbare Nachricht zum Thema Web-Analyse und-erprobung: Experimentieren und-prüfung: A Primer. Ich empfehle diesen Post lesen, wenn Sie daran interessiert sind, in diesem Bereich.
4. April, 2007 at 20:51
[...] Also, was sind einige gute Tests Ressourcen? Wie wäre es mit Avinash's blog. Er hat einen großen Beitrag Titel Experimentieren und-prüfung: A Primer. Starten Sie es und dann auf FutureNow. Sie haben einige gute Bücher darüber, wie Sie eigentlich getestet. Sie finden zwei große Starter-Führer in ihrem Online-Shop. Wenn Sie bereits mit dem Testverfahren überprüfen Sie die Website-Optimierungstool-Hilfe und lesen. [...]
April 9th, 2007 at 05:53
Jim Sterne: Fragen und ihr werdet empfangen ...
....
Ich glaube, dass diese. Es ist in meinen Knochen. Klar, Kunden sind nicht neu zu erfinden, Durchbruch Bestellung. Sie wissen nicht, sie brauchen einen iPod, bis alle anderen hat eine. Aber was ist mit den 99,999% der Rest davon? Sie wissen, wie sie gerne kaufen. Sie wissen, wie sie gerne einkaufen. Sie wissen, wie sie zu vergleichen und wie sie wollen, um wieder Produkte.
Avinash Kaushik ist eine der am meisten aufschlussreiche und intelligente Web-Analysten ich je traf. Für seine ausgezeichnete Blog, Occams Razor Avinash sagte sie am besten. "80% der Zeit, die Sie / wir sind falsch, was der Kunde will / erwartet, von unserer Seite erfahren."
Avinash beschreibt seine Arbeit bei Intuit Umgang mit dem Website-Erfahrung, Verhalten und Ergebnisse. Ergebnisse sind die Ziele des Unternehmens setzt - Verkauf von Software. Verhalten ist über die Klicks. Aber, sagt Avinash, wenn er nur eine der drei für die Arbeit mit, sie müssten die Kunden ein direktes Feedback und die Zufriedenheit unserer Kunden.
Dies ist von seinem Amt Übersicht und Bedeutung der qualitativen Metriken:
....
6. Juni 2007 um 08:29
[...] Ein News-Artikel auf Ajaxian führte mich zu diesem Post zu diesem Artikel (PDF) von Microsoft. Er spricht über A / B-Tests und wie wichtig es ist, Erfolg im Internet. Der Artikel nennt auch die legendäre Avinash Kaushik denen hatte ich das Vergnügen, mit Intuit. Die beste Zeile in dem Artikel lautet: "Je weniger die Fakten, desto stärker ist der Meinung" - Arnold Glasow. Avinash gutgeschrieben ist mit dem Begriff HIPO, das steht für höchste Bezahltes Stellungnahme. [...]
13. Juni 2007 an 01:00
Metriken und Reporting ...
Was wollen wir antworten? Was sind die Medien die Berichterstattung des Konzerns ist? ... ...
22. Juni, 2007 at 03:44
Avinash,
Wonderful Post. Vielen Dank für Ihre Erkenntnisse. Die Werkzeuge für die Analyse und Beobachtung haben sich stark in den letzten Jahren. Was ist jetzt nicht im Vergleich zu den Rotatoren, Javascript Tracker und zahlreiche Tabellen, dass ich mit Jahren.
Dabei Umstellung Optimierung der Arbeit haben wir festgestellt, dass die Segmentierung, die Sie sprechen, ist eine Teilmenge von "Rauschunterdrückung" in Bezug auf die Test-Design.
Wie die Tester fest, und verfeinert das "Conversion-Gespräch" die natürliche Erweiterung ist die Schaffung einer benutzerdefinierten Kanal, dient den Besuchern Sorgen und Nöte. Wenn das Spiel ist eng verbundenen Maßnahmen werden den Benutzern mehr vorhersehbar.
Ihr Begriff - "Experience Testing" ist eine perfekte Artikulation der, was ich als das "Conversion-Gespräch"
Ich genieße Ihre Blog und Denken.
David
6. August 2007 um 07:08
[...]
Verwenden von Web-Analytics Weitere Identifizieren Site Conversion Verbesserungen
Zwar bin ich ein großer Fan der Verwendung von Web-analytische Daten zu decken ein breites Spektrum von Möglichkeiten, mit Verbesserung von Website-Content und Umbauten, für diese Stelle die nützlichsten glaube, dass ich tun kann, ist Ihnen auf den folgenden Seiten über die ausgezeichnete Blog von Avinash Kaushik sich mit allen Dingen Analytics:
* Experimentieren und-prüfung: A Primer
* Excellent Analytics-Tipp # 5: Die Conversion-Rate Grundlagen und Best Practices
* Excellent Analytics-Tipp # 8: Beurteilung der tatsächlichen Conversion-Rate und "Opportunity Pie"
[...]
September 4th, 2007 at 10:32
Avinash,
Sie sollten über die Grenzen der Javascript und wie nur eine installierte Lösung wie die, dass Memetrics Angebote können mehr als ein paar Attribute auf eine einfache Seite. Warum nicht testen bezahlte Suche, Direct Mail oder etwas mit einer abhängigen Variablen.
6. November 2007 um 13:21
[...] Die neue Division wird unter der Leitung von unserem eigenen Russ Glas, und wir sind aktiv für die Einstellung seiner Mannschaft (die befindet sich in San Francisco und Waltham - ja, ja, ich weiß, schön, Beau Koliken , leicht post-industriellen Waltham. Versuchen Sie enthalten.) Sooo, wenn Sie Interesse haben, freuen wir uns sofort für eine Vice President der Werbung, ein Senior Product Manager für unsere Ad-Produkte, ein Produkt-Manager auf multivariaten Tests (das ist eigentlich ziemlich cool stuff - check this out, wenn Sie neugierig). Wir freuen hinzufügen Werbung Vertriebsmitarbeiter recht schnell (kein Job Beschreibung, aber wenn Sie in dem Feld, das Sie wahrscheinlich bekommen) und Ad Ops Manager, etc, etc .... [...]
18. Nov 2007 um 18:07
[...] LinksIan Ayers sehr überzeugende Supercrunchers ist ein Buch, das zeugt von der Macht der Split-Test, und ich empfehle es. Avinash Kaushik ist eine herausragende Analyse-Autor und Blogger, und hat eine gute Grundierung für experimentelle Prüfung. [...]
27. Nov. 2007 um 10:12
: (Ich bin mit Problem bei der Einrichtung von Experimenten auf Google Website-Optimierungstool.
Für die Erstellung von Experimenten für die Conversion-Rate Optimierung Ich bin mit Problemen konfrontiert, auch für einen sehr kleinen Test durchzuführen.
Bisher habe ich etwa 5-6 Versuche für unsere Website mit dem Website-Optimierungstool, sondern von letzte Woche habe ich mich nicht immer erforderlich Kombinationen über die Einrichtung Experimente.
Ich hinzufügen, die Skripte zu den Test-und Conversion-Seite und auch die Unterschiede, aber in letzter Schritt, wenn ich eine Vorschau ich es nicht finden gewünschten Kombinationen.
Bitte helfen Sie mir, wie ich der Meinung, dass vor 1 Woche war ich erfolgreich die Einrichtung Experimente, sondern aus den letzten 1 Woche bin ich tun gleichen Maßnahmen, die ich verwendet, aber nicht immer gewünschten Kombinationen.
Vielen Dank im Voraus.
Grüße,
Shashank
5. Februar, 2008 at 12:01
Gute Blog,
Was ist der Unterschied zwischen A / B-Tests und was Sie fordern Erfahrung Prüfung? Es klingt wie für die Erfahrung Test Sie ein Mega-Variable, lässt es "Standort", der ein Bündel von Eigenschaften (Seiten, Bilder, etc.). Ich verstehe nicht, wie die tatsächliche Prüfung ist anders als A / B.
Für die multivariate Tests sind wir suchen auf Attribute, die sich in mehreren Dimensionen (man denke an die Eckpunkte in einem Hyperwürfel). Was uns betrifft, ist, dass es zu Wechselwirkungen Auswirkungen auf die Variablen, die wir testen wollen - so, dass wir wissen müssen alle Werte der einzelnen Variablen bei der Ermittlung der Ergebnisse.
Ein unerwähnt "con" dieses Ansatzes ist, dass es sehr kostspielig ist eine Daten-Perspektive - wir brauchen viele Beobachtungen zu "füllen", dass Hyperwürfel robuste Schätzungen zu machen. Ein Weg, um dies für die Arbeit mit Teilprobenahme faktoriellen Design Prüfung - wo wir die Annahmen darüber, wie viele Variablen, die wir brauchen, um zu jeder Zeit - das hat den Effekt, der Zusammenbruch oder Aggregation einige der Ecken der Würfel so, dass wir weniger Schätzungen.
Nochmals vielen Dank
Matt Gershoff
18. Juni 2008 um 12:06
[...]
3. Landing Page Quality:
Ihre Empfehlungen sind relevant, und die Erwartungen der Besucher sind mit dem, was Sie passende Angebot. Die Qualität Ihrer Zielseite hat, befragt zu werden, dann.
Es gibt mehrere Methoden, um die die Qualität, A / B-Tests und Tests mit mehreren Variablen sind zum Beispiel. Sie können auch die Unterstützung der Heatmap Tools wie crazyegg oder Website-Overlay-Option bei Google Analytics für den gleichen Studie.
[...]
24. November 2008 um 15:05
Hi Avinash.
War auf der Suche nach einer schnellen und schmutzigen Beschreibung multivariaten Tests. Das war genau das, was ich suchte:) Vielen Dank.
Vivek
4. Jan. 2009 an 15:29
Avinash,
Ich kam in dieser Website über einen anderen Link und Lesung wurden in den letzten 20 Minuten an, was Sie zu bieten haben für die Information und Beratung über den Aufbau von Web-Sites und Seiten sich. Ich arbeite seit Solo den letzten 10 Jahren, während sich meine Grad, nicht eine einfache Sache zu tun, aber möglich.
Als Unix-Programmierer, hatte ich an eine bestimmte Protokoll und Test-Code, bevor er durfte gehen. Zu der Zeit war ich das Schreiben von Code in Unix-oder MUMPS aber nach wie vor eine notwendige Sache. Ich bin nach wie vor die gleichen Gewohnheiten mit meiner Web-Seiten, bevor sie an meine Kunden.
Das Unternehmen, war ich für gebrauchte multivariaten Ich glaube. Nun, da bin ich für mich, ich bin nach Erfahrung Prüfung. Great post! Beste Wünsche für 2009!
Sue
Der 3. Juni 2009 an 08:01
Avinash hallo, ich halte mich ein Leser des Blogs, aber ich bin immer zu entdecken Sie Ihre "alten" erstaunliche Beiträge.
Können Sie mehr Infos über die "Expercience Test"-Konzept oder auch einige weiterführende Links?
Dank Avinash, und halten Sie sich mit Ihrem großartige Arbeit!