Vortrag WUD iterativer Test am Bsp Netdoktor.ppt ... · Vorarbeiten im Re-Design Prozess von NetDoktor.de Next Steps Nutzerbefragggung (Anforderungen + Personas) Konzepte (Screens,

Rapid PrototypingRapid Prototyping(iteratives Usability-Testing)

Fallstudie: NetDoktor.de

© eResult GmbH – Results for Your E-Business(www.eresult.de)

Agenda

Agenda

Untersuchungsgegenstand: Prototyp von NetDoktor.de

Was ist ein iterativer Usability-Tests?

Eckdaten: Dauer & Erhebungsverfahren

Überblick: Erkenntnisse in den Testschleifen

1. Testschleife: Ausgewählte Erkenntnisse

2. Testschleife: Prüfung der Empfehlungen

und weitere Erkenntnisse

Learnings

Next Stepsp

Seite 2 Usability-Testing in frühen Projektphasen 2

Vorarbeiten im Re-Design Prozess von NetDoktor.de

Next Steps

Nutzerbefragung g g(Anforderungen + Personas) Konzepte

(Screens, Wireframes, Struktogramme etc.)

An-

Evaluation durch Usability-Experten

NetDoktor.deVersion 1.0

wenderNetDoktor.deVersion 2.0

Prototyp(en) / Klick-Dummy

Szenariobasierter Test mit typischen Nutzern (it ti l t)

Klick Dummy

(iterativ angelegt)

Denkprotokolle fok Interviews Klickanalyse


Denkprotokolle fok. Interviews Klickanalyse

Untersuchungsgegenstand:Prototyp von NetDoktor.deyp


NetDoktor.de – das führende Gesundheitsportal

Untersuchungsgegenstand: NetDoktor.de

• Das Portal mit langjähriger Erfahrung− internationaler Rollout im Jahr 1999 − Eigentümer des Portals ist seit 2007 die

Verlagsgruppe von Holtzbrinck

• Die Plattform mit höchster R i h itReichweite− 1,2 Mio. Unique User (AGOF 08-II)− 2,5 Mio. Visits (IVW 10/08)

• Der Anbieter mit größter Markenbekanntheit− konsequente Strategieverfolgung

• Die Site mit absoluter Vertrauenswürdigkeit

− stetige Investitionen in die Marke

g− unabhängige Redaktion− qualitativ hochwertige Berichterstattung

Seite 5 Usability-Testing in frühen Projektphasen

NetDoktor.de – Inhalte und Leistungen


Wir informieren über Gesundheit – unabhängig, laiengerecht und evidenzbasiert

Die Inhalte werden von unserer eigenen Redaktion bestehend aus Medizinern

Mediziner Biologen Apotheker Journalisten

Inhalteund Biologen recherchiert und erstellt• Umfangreiche Lexika

− MedikamenteK kh i

Inhalte

− Krankheiten− Symptome− Eingriffe− Untersuchungen− ICD-Suche und Laborwerte

• Features und Reportagen• Themenspecials• Tests & Quiz• Aktuelle

N h i h /N lInformationen

Nachrichten/Newsletter• Diskussionsforenneutral kompetent aktuell


NetDoktor.de - Nutzerverteilung


• Überdurchschnittlich hoher Anteil an Frauen

Anteil in %

40,5Männer

Index: Internet‐nutzer= 100Geschlecht

74 Anteil an Frauen,

59,5

8,7

20,0

Frauen

14 ‐ 19 Jahre

20 ‐ 29 Jahre

Alter

132

71

102

125

• Typischer NetDoktor.de‐User ist zwischen 20 und 39 Jahre alt25,2

21,8

24,4

2,7

30 ‐ 39 Jahre

40 ‐ 49 Jahre

50 Jahre und älter

kein Schulabschluss

Ausbildung

60

125

96

96

zwischen 20 und 39 Jahre alt• Hoher Anteil an „50+“‐jährigen

Üb d h h ittli h A t il,

63,5

33,9

65,8

kein Schulabschluss

Volks‐/ Weiterf. Schule

Fach‐, Abitur, Uni.‐Abschluss

BerufstätigBeruf

6096115

101

• Überdurchschnittlicher Anteil an Usern mit Abitur/ Akademikern

• NetDoktor de‐User sind20,4

13,8

14,7

55,4

Nicht (mehr) berufstätig

In Ausbildung

bis unter 1.000 Euro

1.000 ‐ unter 3.000 Euro

Haushaltsnettoeinkommen

115

81

98101

• Überdurchschnittlicher Anteil an

NetDoktor.de‐User sind berufstätig/ in Ausbildung

Zielgruppe: netdoktor.de Nutzer im durchschnittlichen Monat (1,18 Mio.) Quelle: AGOF internet facts 2008‐I

,

29,91.000 unter 3.000 Euro

3.000 Euro und mehr 104 Usern mit einem monatlichen Einkommen von 3.000 € +


NetDoktor.de - Personas


Florian V., besorgter Vater

Ariane K., aktive Frau und Mutter

Ilse B., chronisch KrankeLars K.,

leicht Kranker


Hannah K., medizinisches Personal

NetDoktor.de im Wandel – Relaunch September 2008


Pre Relaunch Post Relaunch

• Mehrere parallele SystemeF hl d V t d

• Betrieb von mehreren

Backend

• Fehlende Vernetzung und unzureichende Schnittstellen• Hoher manueller

Aufwand

Kunden-portalen über ein System

• Einfachere Auslieferung von Content

• Geringe Geringe Übersichtlichkeit

• Kein zeitgemäßes Design• Thematische Gliederung

nur in Teilbereichen realisierbar

• Verknüpfung von Inhalten nach Themen und Zielgruppen

• Magazincharakter durch großformatige Bilder

• Innovatives Navigationskonzeptin Teilbereichen realisierbar Innovatives Navigationskonzept

Frontend


Was ist ein iterativer Usability-Test?


Vergleich: herkömmlicher vs. iterativer Nutzertest

Methode des iterativen Usability-Test

● Werden zentrale Prozesse auf der Seite verstanden?

● Wird das Navigationskonzept verstanden? h kö li h ● Wird das Navigationskonzept verstanden?

● Wie wird das Text-Design bewertet?

●

herkömmlicher Nutzertest im Lab

● ...

● Kontrolle und Qualitätsprüfung: iterativer ● Kontrolle und Qualitätsprüfung: Führen die zur Problembehebung unterbreiteten Empfehlungen zu einer Verbesserung?

iterativer Nutzertest


Klick-Dummytest

Ablaufschema (idealtypisch)

Methode des iterativen Usability-Test

Ausgangsbasis:

1. Testschleife mit Nutzern im Usability Lab (n=6) Analyse der

optimierter Prototyp

Daten, Optimierung der Screens (in Zusammenarbeit mit Agentur)

Prototyp2. Testschleife mit Nutzern im Usability Lab (n=6)

optimierter Prototyp

Prototyp

3. Testschleife mit Nutzern im Usability Lab (n=6)

Finalisierter Prototypen (Endversion)

Seite 12

Eckdaten: Dauer und Erhebungsverfahreng


Eckdaten zum iterativen Usability-Test

Eckdaten

● Multimethoden-Ansatz:

Verhaltensbeobachtung

Testraum: Testperson mit Interviewerin /

– Verhaltensbeobachtung

– Fokussierte Interviews

– Protokolle lauten Denkens

Projektmanager

Bild der Testperson,Ton und

Bild hi i h lt d ● Erhebungszeitraum:

– Mo., 21.07.2008 und

F 25 07 2008

Bildschirminhalt des Test-PC

– Fr., 25.07.2008

– Je 75 Minuten pro Testperson

● Erhebungsort:Beobachtungs-raum: g

– Göttingen

– Usability-Lab eResult GmbH

Sti h b öß

Videoübertragung Test-PC und Aufnahme der Testperson.

● Stichprobengröße:– 8 Testpersonen

(4 je Testschleife)


Beispiel eines Testaufbaus

Zeitschiene beim Test NetDoktor.de

Eckdaten

1. Tag 3 4 T 6 T Datenerhebung

(1. Testschleife)3.+ 4. Tag

Umsetzung der Empfehlungen

6. Tag Auswertung

2. TagAuswertung

5. TagDatenerhebungAuswertung Datenerhebung(2. Testschleife)


ÜÜberblick: Erkenntnisse in den Testschleifen


Überblick: Erkenntnisse in den Testschleifen

Überblick

Problem-1. Testschleife

gefundene

2. Testschleife

bereiche gefundene Probleme

Kontrolle der Empfehlungen

neu gefundene Probleme

Startseite 2 - -Startseite 2

Navigation 1 - 1

Suche 5 2Suche 5 2

Artikelseite 4 1

Katalog 2 0

Forum 0 - - 1

Footer 1 - 0

Empfehlung neue Empfehlung


p goptimiert

p g

1 Testschleife: 1. Testschleife: Ausgewählte Erkenntnisse


Startseite


Freie Angebotsnutzung - Einstiegsthema

1. Testschleife

Einstiegsthema:Nicht jede TP fühlte sich durch das Einstiegsbild angesprochen Der Einstiegsbild angesprochen. Der Button, um sich ein anderes Einstiegsthema anzeigen zu lassen wurde nicht als solcher

h d dwahrgenommen und verstanden.


Empfehlung zum Einstiegsthema

Damit die Themenvielfalt besser verdeutlicht wird und sich möglichst viele Nutzer von NetDoktor angesprochen fühlen sollteviele Nutzer von NetDoktor angesprochen fühlen, sollte...

Thema 15 sek

Thema 2

Thema 3

The 4

Bild zum Thema 1

Thema 1

5 sek.

5 kThema 4

Thema 5

Thema 1

Thema 2

Thema 3

Bild zum Thema 2

sich das

5 sek.

Thema 4

Thema 5

... sich das Einstiegsthema automatisch aktualisieren

Kurzbeschreibung zu Thema 2

... über Reiter verdeutlicht werden, dass

aktualisieren.

These: Werden wechselnde Inhalte als


verschiedene Themen zur Auswahl stehen störend empfunden?

Aufgabenstellung im Test

1. Testschleife

Recherche über die Krankheit „Asthma“:

„Die kleine Tochter eines Bekannten hat in letzter Zeit häufiger starke Hustenanfälle. Ihnen lässt das keine Ruhe und Sie möchten jetzt bei NetDoktor.de Ihnen lässt das keine Ruhe und Sie möchten jetzt bei NetDoktor.de nachsehen, ob dies vielleicht Anzeichen für Asthma sind und woran man erkennt, dass ein Kind Asthma hat.“


Vorgehensweise A: Nutzer gingen über die Navigationg g g


Neues Navigationskonzept

1. Testschleife

DetailseiteStartseite

1. Ebene

2. Ebene

☺ Das neue Navigationskonzept wurde verstanden.


wurde verstanden.

Vorgehensweise B: Nutzer probierten die Suchfunktionp


Vorschlagsfunktion

1. Testschleife

Startseite

☺ Vorschlagsfunktion wurde positiv bewertet.


Detailseite „Asthma“


Mouse-Over-Funktion im Lexikon auf Detailseite

1. Testschleife

Bedienungsfehler:Möchte der Nutzer aus der Linkliste zum Punkt „Wissen“ einen Eintrag auswählen, darf er mit dem Mauszeiger nicht versehentlich über den Eintrag Ursachen“ gleitenEintrag „Ursachen gleiten. In diesem Fall erscheint die Linkliste für „Ursachen“.


Empfehlung zum Lexikon

Auf die Mouse-Over Funktion sollte verzichtet werden. Erst bei klick auf eine Rubrik sollte sich der Inhalt der rechten Box ändernklick auf eine Rubrik sollte sich der Inhalt der rechten Box ändern.

Asthma Lexikon

Wissen

Ursachen

Symptome

Asthma bronchiale

---------------------

Asthma bronchiale bei Baby & Symptome

Diagnose

Therapie

Prognose

Asthma bronchiale bei Baby & Kind

---------------------

Asthma in Zahlen Prognose

Vorbeugen

Tipps

--------------------

Asthma und COPD - die Unterschiede

--------------------

Erwachsene - Die vier Asthmastufen

Kinder - Die vier Wissen


2 Testschleife: 2. Testschleife: Bewertung der Empfehlungen

und weitere Erkenntnisseund weitere Erkenntnisse


Empfehlung zum Einstiegsthema

2. Testschleife

Vorher Nachher ☺Vorher Nachher ☺Jede Testpersonen fühlte sich von mindestens einem Thema angesprochen. Wechselnde Inhalte wurden nicht als störend empfunden.


Inhalte wurden nicht als störend empfunden.

Empfehlung zum Lexikon

2. Testschleife

Vorher Nachher ☺Vorher Nachher ☺


Forum

2. Testschleife

Bezug unklar:Manchen TPen war nicht klar, ob sich die Foreneinträge auf das von ihnen ausgewählte Thema „Asthma“ oder auf alle Themen der Websiteauf alle Themen der Websitebezogen.

Themenseite „Asthma“Themenseite „Asthma


Empfehlung zur Darstellung des Forums

2. Testschleife

Umbenennung:

„Forum“ „Forum Lunge – letzte Einträge“ „Lunge“ „Alle Einträge“

Forum LungeForum Lungeletzte Einträge Alle Einträge

Was fehlt mir wirklich? -05 07 08Was fehlt mir wirklich? -05.07.08

Schwellung im Halsansatz – 05.07.08

Sarkidose und Schwangerschaft – 04.07.08

Atemnot im Schlaf – 04.07.08

Schatten auf/hinter der Lunge – 04.07.08


Learnings


Learnings

Überblick

● Genaue Abstimmungen zwischen den beteiligten Agenturen ist erforderlich:Agenturen ist erforderlich:

– Zeitmanagement

– Umsetzung der Empfehlungen

● Als Testmaterial genügen einfache, funktionale Prototypen (Klick-Dummys) anhand derer konkrete Aufgaben bzw. Funktionalitäten und Interaktionsabfolgen getestet werden könnenInteraktionsabfolgen getestet werden können.

● Da neue Probleme aufgetreten sind und einige Empfehlungen nicht angenommen wurden, ist eine 3. Testschleife sinnvoll.a ge o e u de , s e e 3 es sc e e s o

● Gruppengröße überdenken: In der ersten Testschleife ggf. mehr Testpersonen, damit anfangs mehr Probleme gefunden werden.


Next Steps


Next Steps

Next Steps

Nutzerbefragung g g(Anforderungen + Personas) Konzepte

(Screens, Wireframes, Struktogramme etc.)

An-


AnwendungVersion 1.0AnwendungVersion 1.0

Erfolgskontrolle

Next Steps:

wenderAnwendungVersion 2.0


AnwendungVersion 2.0

Erfolgskontrolle (Online-Test, Logfile-Analysen, Remote Usability-Test)

Szenariobasierter Test mit typischen Nutzern (it ti l t)

Klick DummyTest)

(iterativ angelegt)

Denkprotokolle fok Interviews Klickanalyse


Denkprotokolle fok. Interviews Klickanalyse

Vielen Dank für Ihre Aufmerksamkeit!


KurzvorstellungKurzvorstellung

eResult GmbHeResult GmbH

© eResult GmbH – Results for Your E-Business(www.eresult.de)

eResult GmbHE Commerce Research & Consulting

Kurzvorstellung

E-Commerce Research & Consulting

Usability Tests & BeratungUsability-Tests & Beratung(Web-Anwendungen, Intranets, Software, mobile Dienste, Handys u.a.)

Marketing-Forschung & Beratung(Fokus: Online-Marketing, Online-Werbung, Zufriedenheitsanalysen)

Seite 4141 eResult GmbH - Kurzvorstellung

Eingespieltes Führungsteam ...Usability und (Online )Marketing Experten

Kurzvorstellung

Usability- und (Online-)Marketing-Experten

Wilhelm Prof. Yom Rehmann Jüngel Dr. Magerhans

Gründer und Firmenleitung

Studienleiter

Qualitative Quantitative Firmenleitung Qualitative Forschung

Quantitative Forschung

• Gründung: 2000

• 15 feste Mitarbeiter/-innen (+ 3 freie Mitarbeiter/-innen)


(+ 3 freie Mitarbeiter/ innen)

Forschungsinfrastruktur

Kurzvorstellung

● (mobiles) Usability-Lab

O li l

Testraum:Testperson mit Interviewerin / ● Online-Access Panel

(52.800 Personen)

● Forschungstools für

Interviewerin / Projektmanager

Bild der Testperson,● Forschungstools für ...

– Blickverlaufsanalysen

O li /O i B f

Bild der Testperson,Ton und

Bildschirminhalt des Test-PC

– Online-/Onsite-Befragungen

– Online-Fokusgruppen Beobachtungs-raum:

– Clickstream-Analysen

● Umfrage-Datenbank:

Videoübertragung Test-PC und Aufnahme der Testperson, Eyetracking

Bewertungen für 298 Web-Angebote

Eyetracking.


(mobiles) Usability-Lab

Kurzvorstellung

Technik: Test-PC, Eyetracker, Analyse-PC zur Videoübertragung (im Beobachtungsraum)Videoübertragung (im Beobachtungsraum)

Testraum: Testperson mit Interviewerin / Projektmanager

Dieses Lab können wir an beliebigen Standorten / in Teststudios aufbauen. Wir benötigen lediglich 2 Räume. Die komplette Technik bringen wir mitkomplette Technik bringen wir mit.


Beobachtungsraum: Videoübertragung Test-PC und Aufnahme der Testperson, Eyetracking

Unsere Referenzen

Kurzvorstellung

• Handel • Tourismus


Unsere Referenzen

Kurzvorstellung

• Internet & Telekommunikation • Medien & Kommunikation

• Industrie


Unsere Referenzen

Kurzvorstellung

• Wissenschaft & Non-Profit• Dienstleistungen

• Pharma & Gesundheit


Usability Entwicklungsphasen

Relevanz & Verbreitungg


Usability Entwicklungsphasen

Kurzvorstellung

lAnalyse

Konzeption

Programmierung

0 10 20 30 40 50 60 70 80 90 100

Betrieb

0 10 20 30 40 50 60 70 80 90 100

Rang 1 = Usability hat hohe Bedeutung

Rang 4 = Usability hat kaum Bedeutung

Rang 2 Rang 3


Usability-Methoden & Verfahren: Top 3 je Phase

Kurzvorstellung

Top 3 je Phase

Analyse Konzeption Umsetzung BetriebAnalyse Konzeption Umsetzung Betrieb

A f b l F k Usability-Test im Logfile-Analyse / Aufgabenanalyse Fokusgruppen Usability Test im Lab

Logfile Analyse / Web-Analytic

Zielgruppenbe-fragung / Anforde-

rungsanalyse

Prototyping(iterative

Nutzertests)

Experten-Evaluationen

Nutzerbefragung (Onsite)

Personas(Nutzerstruktur- Design-Tests Eyetracking Remote Usability-(Nutzerstruktur

Analyse)Design Tests Eyetracking Test


Re-Design Prozess

eine „typische“ Vorgehensweiseyp g


Re-Design Prozess eine typische“ Vorgehensweise

Kurzvorstellung

eine „typische Vorgehensweise


Nutzerbefragung (Anforderungen + Personas)

Konzepte

Konzeption –Fokusgruppen, Expertisen

An- Konzept-/ D i

AnwendungVersion 1.0

p(Screens, Wireframes, Struktogramme etc.)

Erfolgs-kontrolle (Online-Test

wender

Denkprotokolle

DesigntestAnwendungVersion 2.0


(Online Test, AB-Test)

Szenario-basierter Test mit typischen Nutzern (iterativ

Denkprotokolle

fok. Interviews

Kli k d

Klick-Dummy

(angelegt)Klick- und

Blickanalyse


Nutzerzentrierte Nutzerzentrierte Anwendungsgestaltung

Leistungen im Überblickg


Kurzvorstellung

Zielgruppen- Onsite-

eventbezogene“ Nutzer-

Zielgruppenbefragung (Panel)

Personas &

OnsiteBefragung

Abbrecher-

„eventbezogene Online-Befragung

User

Beobachtung

Denk-Protokolle

Anforderungs-analyse

Abbrecher-Analysen

User-Tracking Szenariobasierte

User-Tests im Lab Fokussierte Interviews

Eyetracking(eigenes)

Nutzer-PanelExpertenbasierte

Evaluationen

Online-Tests(Benchmarking)Onsite-

Konzeption / Konzepttest

Remote Usability Tests

(Benchmarking)Befragung Card-SortingFokus-

gruppenVergleich von

K t

Seite 5454

Usability Tests Konzepten

eResult GmbH - Kurzvorstellung

Kontaktdaten

Ansprechpartner eResult GmbHp p


Ansprechpartner eResult GmbH

Kurzvorstellung

Geschäftsführung: Thorsten Wilhelm

Wissenschaftliche Leitung: Prof Dr Miriam Eberhard YomWissenschaftliche Leitung: Prof. Dr. Miriam Eberhard-Yom

0551 - 5177 4260551 - 5177 426

[email protected]

0551 - 49 56 93 300551 49 56 93 30

eResult GmbH

Planckstr. 23

37073 Göttingen

Wilhelm Yom

URL: www.eresult.de (Unternehmensauftritt) Online-Panel: www bonopolis de

Seite 56

Online-Panel: www.bonopolis.de

56 eResult GmbH - Kurzvorstellung

Documents

Vortrag WUD iterativer Test am Bsp Netdoktor.ppt ... · Vorarbeiten im Re-Design Prozess von NetDoktor.de Next Steps Nutzerbefragggung (Anforderungen + Personas) Konzepte (Screens,