Usability-Tests mit Kindern durchführen 3: Der Abschluss

Mit Kindern kann die Methode des Lauten Denkens nicht wie bei Erwachsenen angewendet werden. Gründe hierfür sind:

• Wortschatz
• Schüchternheit
• Angst etwas Falsches zu sagen
• "Erwartungen" der Erwachsenen möchten erfüllt werden

Daher muss zum Auswerten der Testergebnisse sehr genau hingeschaut werden:

• Um herauszufinden, wie sehr einem Kind ein Produkt oder Programm gefallen hat, muss unbedingt auf die Gestik und Mimik geachtet werden. Lächeln, Lachen und Vorbeugen geben positives Feedback, frowns, sighs, yawns und Abwenden sind negatives Feedback. Das Körpersprachen-Feedback ist aussagekräftiger, als das, was die Kinder sagen, da Kinder es den fragenden Erwachsenen in der Regel recht machen wollen.
• Ältere Kinder können bereits die Software bewerten. Die Autoren von "Guidelines for Usability Testing with Children" schlagen eine vertikale Skala mit einem lachenden Smiley am oberen und einem weinenden Smiley am unteren Ende vor.
• Diese Kinder freuen sich häufig auch, von ihren eigenen Ideen und Verbesserungsvorschlägen zu erzählen wenn sie danach gefragt werden.  

• Nach dem Test sollte der Testleiter unbedingt noch mal betonen, wie wichtig dieser Test war und wie sehr der Proband ihnen geholfen hat.
• Als Belohnung sollten neben Bezahlung auch Geschenke, wie Gutscheine, Spiele oder Bücher angeboten werden.

Usability-Tests mit Kindern durchführen 2: Der Test

Während der Testphase ist auf folgende Punkte zu achten:

• Vorschul-Kinder sollten ein wenig Eingewöhnungszeit an den Computer bekommen. Der Testleiter könnte mit dem Finger auf den Monitor zeigen und das Kind bitten, mit der Maus an diese Stelle zu fahren.
• Kinder sollten das Produkt in freier Exploration nutzen. Älteren Kindern können allerdings auch konkrete Aufgaben gestellt werden. Wichtig hierbei:
• Einzelne Aufgaben müssen kleiner sein, als man sie erwachsenen Probanden stellen würde.
• Der Testleiter muss sicherstellen, ob das Kind die Aufgabe auch wirklich verstanden hat...
• ... und die Aufgabenstellung wiederholen, falls deutlich wird, dass das Kind diese vergessen hat.
• Kinder sind es in der Regel gewohnt, neue Produkte nicht alleine, sondern gemeinsam mit Freunden, Geschwistern oder Eltern auszuprobieren. Daher stellen sie auch häufig Fragen. Der Testleiter muss auf diese Fragen mit geschickten Gegenfragen reagieren. Der Ball wird (in einem vernünftigen Rahmen) so lange hin und her gespielt, bis das Kind eine Vermutung äußert.
• Der Testleiter sollte die Probanden nicht fragen, ob sie das Spiel (etc.) spielen wollen. Die Kinder könnten 'nein' sagen. Besser zB. "Wir machen jetzt ...".
• Sollte das Kind unruhig und unkonzentriert werden, sollte eine kurze Trink-/Toilettenpause eingelegt werden.
• Aufgaben sollten ion Form von konkreten Arbeitsanweisungen formuliert werden.
• Die Reihenfolge der Tests sollte insbesondere bei Kindern pro Proband variieren, da sich hier die fehlende Konzentration am Ende der Session deutlich stärker bemerkbar macht.
• Motivation beim Kind wird auch durch positives Feedback des Testleiters gefördert.

Usability-Tests mit Kindern durchführen 1: Die Einleitung

Bei Kindern zwischen 3 und 12 Jahren, sind die verschiedenen Fertigkeiten sehr unterschiedlich weit entwickelt. 

Dies betrifft nicht nur die Fähigkeiten beim Umgang mit dem Computer, sondern auch die Aufnahmefähigkeit und das Verständnis dafür, gestellte Aufgaben gezielt umzusetzen. Nicht zuletzt ist beim Auswerten der Ergebnisse zu bedenken, dass die Kritikfähigkeit und -bereitschaft sich von der erwachsener Menschen und auch innerhalb dieser Altersspanne sehr stark unterscheidet. 

Aus diesen und weiteren Gründen ist es daher unbedingt erforderlich, dass man bei Usability-Tests mit Kindern auf diese Eigenschaften und Bedingungen gezielt eingeht. Nur so kann ein erfolgreiches Gelingen und verwertbare Ergebnise sichergestellt werden. 

In den folgenden Beiträgen gehe ich auf diese Feinheiten ein. In diesem Beitrag beschäftigen wir uns zunächst mit der Einleitung der Tests:

Das System wird getestet, nicht das Kind

Wie auch bei Tests mit Erwachsenen ist es besonders wichtig zu verdeutlichen, dass das System getestet wird und nicht das Kind. Das Kind darf gerne Fehler machen - ja es hilft sogar, wenn es Fehler macht, denn die anderen Kinder, die später das Produkt verwenden werden, werden auch Fehler machen. Daher ist es wichtig zu testen, wie sich das Produkt dabei verhält.

Es muss klar gestellt werden, dass die Meinung des Probanden zum Produkt und ihre Mithilfe gefragt sind. Es geht nicht darum die Leistung des Kindes zu messen oder gar zu beurteilen.

Wenn die Kinder nicht weiterkommen, liegt es in der Regel an dem Produkt und nicht an dem Kind.

Sollten die Eltern nach der Einleitung im Testraum bleiben wollen, sollten sie nach Möglichkeit außerhalb des Sichtfeldes platziert werden. Außerdem schon vor der Session instruieren, dass sie keine Hilfestellungen geben dürfen und ihr Kind nicht ablenken sollen.

Hilfestellung

Da Kinder in der Regel mehr Hilfestellung erwarten, als erwachsene Probanden, muss vor dem Test erklärt werden, dass das Kind die Aufgaben selbstständig durchlaufen soll. Gibt es im späteren Verlauf doch viele Fragen, sollte mit Gegenfragen reagiert werden. "Was meinst Du?"

Usability-Tests mit Kindern vorbereiten

Ein Usability-Test sollte gründlich vorbereitet werden. Dies gilt natürlich auch insbesondere für Tests, die man mit Kindern durchführt.


Folgende Punkte empfehlen die Autoren von "Guidelines for Usability Testing with Children":

• Das Testlabor sollte kinderfreundlich eingerichtet werden, um etwas vom "offiziellen Charakter" zu verlieren. ZB. ein paar Poster an der Wand. Eine Spielecke wäre aber zu viel des Guten und würde eher ablenken.
• Vorschulkinder sollten das gleiche Eingabegerät benutzen können, wie es dies von zu Hause gewohnt ist: Maus vs. Trackball, 1 vs. 2 Button. Die Geschwindigkeit des Mauszeigers sollte auf das Minimum reduziert werden.
• Die Laborausrüstung (Kameras, Mikrophone, etc.) müssen zwar effektiv eingesetzt werden (damit man zB. die Mimik des Kindes gut erkennen kann), sollten aber so unauffällig wie möglich platziert werden. Die Kamera sollte nie direkt vor dem Probanden platziert sein.
• Maximale Dauer eines Tests: eine Stunde, Vorschulkinder: eine halbe Stunde (hier zusätzliche Zeit für freies Spielen und Exploration einplanen).
• Die Pausen zwischen zwei Probanden sollten größer eingeplant werden als gewohnt, da die Zusammenarbeit mit Kindern für den Testleiter anstrengender ist als mit Erwachsenen.
• Wie immer gilt, dass die Reihenfolge der Tasks zwischen den Probanden variieren sollte. Dies ist hier besonders wichtig, da Kinder schneller ermüden und unkonzentrierter werden, als Erwachsene.
• Es sollten immer Kinder für Tests ausgewählt werden, die bereits mindesten ein halbes Jahr Erfahrungen im Umgang mit Computern haben...
• ... allerdings sollten Kinder mit überdurchschnittlichen Erfahrungen (Programmieren, Webseiten bauen) vermieden werden (wenn dies nicht explizit die Zielgruppe ist).
• Kinder von Kollegen und die eigenen sollten nicht als Probanden eingeladen werden: Erstens sind ihnen Terminologien aus dem Produkt, der Branche bekannt und zweitens haben sie eine andere Einstellung zu dem Produkt, wenn ein Elternteil es mit entwickelt hat. Diese Faktoren verfälschen das Ergebnis.

Usability Tests mit Kindern: Altersklassen

Hanna, Risden und Alexander unterteilen in Ihrem Artikel "Guidelines for Usability Testing with Children" die Kinder in drei verschiedene Alterklassen ein:

• Vorschule (2 bis 5 Jahre)
• Grundschule (6 bis 10 Jahre)
• 'Mittelschule' (11 bis 14 Jahre)

Kinder unter 2 1/2 Jahren können noch nicht gut genug mit den Eingabegeräten, wie Maus und Trackball umgehen.

Kinder über 14 Jahren können beim Testen wie Erwachsene behandelt werden.

Vorschule (2 bis 5 Jahre)

Für diese Altersklasse sind die aufwendigsten Anpassungen notwendig:

• Aufmerksamkeitsspanne gering
• Motivation, Erwachsene zufrieden zu stellen, nicht gegeben
• Wohlbefinden in fremder Umgebung mit fremden Leuten kann augenblicklich umschlagen
• nur exploratives Testen möglich, keine Aufgabenstellungen
• Problem im Labor: Vorschulkinder können Methode des Lauten Denkens nicht umsetzen. Daher ist es besonders wichtig per Kamera auf die Reaktionen (Gesicht und Körper) des Kindes zu achten. Allerdings sollte die Kamera (in keinem Testfall) direkt vor den Probanden gestellt werden.

Grundschule (6 bis 10 Jahre)

Für diese Altersgruppe ist es schon relativ leicht, altersgerechte Usability-Tests durchzuführen:

• Ruhig sitzen und Bearbeiten von Aufgaben bereits in der Schule erlernt.
• Kinder können Anweisungen von Erwachsenen folgen.
• Probanden sind sich nicht unmittelbar bewusst, dass sie beobachtet werden.
• Je jünger, desto schüchterner; je älter, desto eher bereit, die Software auch zu kritisieren.

Mittelschule (11 bis 14 Jahre)

Diese Altersgruppe ist natürlich am leichtesten zu integrieren:

• i.d.R. geübt in Computerbedienung 
• fremde Erwachsene sind keine Hürde
• in der Lage, Aufgaben zu erledigen und dies auch gerne zu tun (beachten, dass eine erste Phase der freien Exploration gegeben werden sollte)
• Auf der einen Seite funktioniert Lautes Denken bei älteren Kindern
• auf der anderen Seite können sie aber auch gehemmt sein, da ihnen bewusst ist, dass sie sich in einer Testsituation befinden und beobachtet werden.

Welche Konsequenzen sich aus den unterschiedlichen Verhaltensweisen für die Vorbereitung und Umsetzung von Usability Tests ergeben, wird im folgenden Artikel beschrieben.

Usability Testing mit Kindern

Im Studium habe ich viel über Usability und Usability Testing in den verschiedensten Ausprägungen gelernt -- über Kinder haben wir dabei allerdings nie gesprochen. Da wir in der Firma, in der ich arbeite (www.scoyo.de), aber ein Online-Produkt für Kinder entwickeln, ist es höchste Zeit, sich konkret damit auseinanderzusetzen.

Bei einer ersten (Brute-Force)-Recherche stieß ich auf den Artikel "Guidelines for Usability Testing with Children" von Microsoft.
Die Erkenntnis aus dem Artikel: Im allgemeinen gelten auch für Tests mit Kindern die selben Regeln wie für Tests mit Erwachsenen. Dennoch: Es gibt ein paar Unterschiede, die man unbedingt beachten sollte, da sie den Erfolg oder Misserfolg einer Testreihe durchaus beeinflussen können.

Die Autoren, eine Gruppe von Usability Engineers bei Microsoft, haben diverse Testreihen unternommen, um Software und Hardware mit Kindern zu testen. Die Tests beinhalteten:

• Usability-Labor Tests / Beobachtungen
• Interviews
• Umfragen

Die Tests hatten unter anderem folgende Schwerpunkte:

• Nutzung durch die Kinder
• Gefallen an den Produkten
• Benutzerfreundlichkeit
• Lernkurven

Aus den gewonnen Erkenntnissen haben die Autoren eine Reihe von Richtlinien abgeleitet, wie sich das 'klassische' Testen auf Situationen mit Kindern übertragen läst.

Es folgen Beiträge zu:

• Verhaltensbeschreibungen der Kinder in den Altersgruppen
• Preschool (2 bis 5 Jahre)
• Grundschule (6 bis 10 Jahre)
• 'Mittelschule' (11 bis 14 Jahre)
• Richtlinien beim Testen mit Kindern
• Planung und Vorbereitung
• Testdurchführung
• Abschluss
• Zusammenfassung