suchmaschinen testen, search barcamp 2012 sonja quirmbach

Sonja Quirmbach 1

Usability Testing in der Praxis: Wie teste ich meine Suchmaschine?Barcamp Search, 9. Oktober 2012Sonja Quirmbach ([email protected])

Sonja Quirmbach: Usability-Testing in der Praxis - Barcamp Search 2012, Berlin

1. Was heißt Usability in Suchmaschinen

Gestaltungsbereiche sind:

Den Nutzern stetig Hilfestellung, Führung und Rückmeldung im kompletten Suchprozess bieten, durch:

1. passende Prozesse

2. hilfreiche Funktionen

3. optimales Design

4. passendes Ergebnismatching

„Nutzer wünschen sich: Eine schnelle, intuitiv zu bedienende Suche, die relevante Ergebnisse liefert!“

Sonja Quirmbach: Usability –Testing in der Praxis - Barcamp Search 2012, Berlin

2. Evaluationsmethoden für Suchmaschinen

Usability ist Messbar durch:

1.Quantitative Methoden (Masse; Signifikanz; geringer Individualitätsgrad):

Panel-Umfragen, Onsite-Umfragen, Onsite-Feedback, A/B-Testing/Multivariates Testing

2.Qualitative Methoden (Wenige;Tendenz; hoher Individualitätsgrad):

Usability-Tets im Labor, Tiefeninterview, Think Aloud, Eyetracking

„Die Resultate aus den Tests zeigen auf, was die Nutzer machen, sehen, denken, wie sie verstehen und auf was sie reagieren.“

Ergänzende Methoden für Suchen:

1. Logfile-Analysen (Was suchen die Nutzer?)

2. Relevanztests bzw. Retrievaltests (Was für Ergebnisse kommen bei den Suchanfragen?)

Erfahrungen?


3. Usability Testing

Wann wird getestet?

Wie oft wird getestet?

Wann hört es auf?


4. Testing-Regeln: Dont’s

Testen: Testen zum Selbstzweck Testen ohne sinnvollen Fragekatalog Testen ohne sinnvolles Gesamtkonzept

Testobjekt: Testobjekt ist nicht festgelegt Testobjekt wird während des Tests verändert Veränderungen wird zu spät kommunizieren und es wird mit obsoletem Objekt getestet

Probanden: Interne Probanden (Kollegen) wählen, die in der Produktentwicklung verhaftet und nicht neutral

sind Externe Probanden, die nicht zu der Zielgruppe des Produktes gehören

Verantwortlichkeiten: Verantwortlicher Ansprechpartner fehlt, z. B. für die Agentur Keine Beachtung der Testergebnisse bei den Produktverantwortlichen


5. Fragen- und Aufgabenstellungen

Der Fragebogen ist abhängig von dem Testziel: Funktionale Tests Verhalten der Nutzer Einstellungen der Nutzer Anforderungen der Nutzer

Hypothesen aufstellen: Hypothesen helfen bei der Erstellung des Fragenbogens und der Aufgabenstellung

für die Nutzungsszenarien Beispiele für Hypothesen?

Zur Auswahl der Aufgabenstellung für den Test: Offene oder geführte Suche für den Test

Beispiele für Aufgaben?

Zur Auswahl der Fragen für einen Fragebogen: Das Fragebogenformat

Beispiele für Formate?

„Usability-Tests zeigen das Produkt in Aktion und durch sinnvolle Gestaltung der Nutzungsszenarien werden Schwachstellen identifiziert .“


6. Live-Testing

Live-Testing von Site Searches: sparkasse.de comdirekt.de postbank.de dkb.de targobank.de ing-diba.de

Im Vergleich Suchmuster: Wie wird das Thema innerhalb des Sites gefunden? Wie kommt der Nutzer über Google an das Thema?

„Testing with one user is 100% better than testing with none.“ (Steve Krug)


7. Testergebnisse

Negative oder schlechte Ergebnisse - Was nun?


7. Testergebnisse

„Nach dem Test ist vor dem Test. Nutzerzentrierte Produktentwicklung als aktives Risikomanagment.“

9. Oktober 2012

Sonja Quirmbach: Usability-Testing in der Praxis - Barcamp Search 2012, Berlin 10

Vielen Dank!

Noch mehr zum Thema Usability Testing in Suchmaschinen?

Blog: www.sonja-quirmbach.com

Quirmbach, S.: Suchmaschinen: User Experience, Usability und nutzerzentrierte Website-Gestaltung (X.media.press), Springer Verlag; 27. August 2012

suchmaschinen testen, search barcamp 2012 sonja quirmbach

Documents