So führen Sie Remote-Usability-Tests durch

In dem vorherigen Artikel haben wir darüber gesprochen, was "Remote Usability Testing" ist, und wir haben die Vor- und Nachteile aufgegriffen. In diesem Artikel gebe ich Ihnen einige praktische Ratschläge für die Durchführung Ihrer eigenen Remote Usability-Sitzungen.

Illustration von 200 Character Kit Job auf dem Envato Market

Auswahl der richtigen Software

Für Remote-Usability-Tests gibt es zwei Software-Teile:

  1. eine Bildschirmaufnahme-App
  2. eine Bildschirmfreigabe-App

Für die Bildschirmaufnahme unter OS X können Sie Quicktime verwenden. Wählen Sie einfach das aus Bildschirmaufnahme Option und du bist gut zu gehen. Wenn Sie möchten, dass die Aufnahme bearbeitet werden kann, versuchen Sie es mit Screenflow (OS X) oder Camtasia (Windows)..

Bei der Bildschirmfreigabe können Sie mit Google Hangouts nichts falsch machen. Es ist kostenlos, die meisten Nutzer vertrauen der Marke Google, es ist einfach einzurichten und wenn sich jemand anderes einwählen möchte (Projektbeteiligte), können sich bis zu zehn Personen anschließen. Bitten Sie sie einfach, ihre Kameras und Mikrofone stummzuschalten.

Es gibt Produkte, die Bildschirmfreigabe und Bildschirmaufzeichnung kombinieren. Die „Moderated Testing“ -Funktion von Validately ist wahrscheinlich die beste, erfordert jedoch einen professionellen Plan, der derzeit 199 US-Dollar pro Monat kostet.

Schreiben Sie Ihre Rekrutierungsspezifikation

Ihre Rekrutierungsspezifikation ist die Liste der Attribute, die Ihre Benutzer haben sollen (Abbildung unten). Wenn Sie zum Beispiel an einer Fahrrad-App arbeiten, möchten Sie Radsportfans finden und Zeitverschwender ausschließen.

Ein einfaches Dokument zur Rekrutierungsspezifikation

Es ist oft eine gute Idee, zu genaue Angaben zu demografischen Details zu vermeiden. Wenn zum Beispiel die Altersgruppe und das Geschlecht nicht den Kern der Definition Ihrer Benutzer bilden, legen Sie keine bestimmte Quote für diese Merkmale fest.

Benutzer sind oft ohnehin besser durch Verhalten und Einstellungen segmentiert, da dies eher ihre Neigung zur Verwendung oder zum Kauf Ihres Produkts beeinflusst. Wie viel Radfahren macht der Benutzer zum Beispiel? Wie viele Fahrräder besitzen sie? Was geben sie monatlich für Abonnements und Apps für Sport-Apps aus??

Einrichten eines Screener-Fragebogens

In diesem Artikel gehen wir davon aus, dass Sie die Rekrutierung selbst durchführen (auch als "Selbstbedienung" bezeichnet) und über ein begrenztes Budget verfügen. Wenn Sie Geld zum Ausgeben haben (£ 50-100 / Kopf Finder-Gebühr), können Sie eine Rekrutierungsagentur für Teilnehmer engagieren, ihnen Ihre Rekrutierungsspezifikation geben und sich um alles kümmern lassen. Wenn Sie dies nicht tun, ist es einfach, die Rekrutierung selbst durchzuführen. Sie können ein kostenloses Tool wie Typeform oder Google Forms verwenden, um einen Online-Bewerbungsfragebogen einzurichten. Die Idee ist, dass Sie diese URL dann verwenden und in sozialen Medien, in Foren und an anderen Orten, an denen Ihre Benutzer zu finden sind, bewerben.

In Ihrem Fragebogen sollten Sie eine Mischung aus strukturierten Fragen (z. B. Optionsfelder) verwenden, in der Sie Benutzer kategorisieren und filtern können. und unstrukturierte Fragen (z. B. Textfelder), in denen Sie ihre Antworten lesen und Personen auswählen können, die scheinbar gute Kommunikatoren sind und etwas Interessantes zu sagen haben.

Vergessen Sie nicht, Fragen zu ihrer Verfügbarkeit zu stellen, um an den angegebenen Tagen teilnehmen zu können. Denken Sie daran, wenn Sie einen anständigen Anreiz bieten (z. B. einen Amazon-Gutschein in Höhe von £ 15 für eine zwanzigminütige Sitzung), werden die Personen eher die Zeit finden.

Titelseite eines typischen Screener-Fragebogens (typeform.com)

Eine der frustrierendsten Dinge bei der Benutzerforschung ist die Zeitverschwendung. Personen, die die Zahlung wünschen, die Sie anbieten, aber im Fragebogen liegen, oder Personen, die der Spezifikation entsprechen, sich aber als einsilbig oder unkooperativ herausstellen. Sie müssen akzeptieren, dass etwa 20% Ihrer Rekruten "Duds" sind. Trotzdem ist es eine gute Idee, Maßnahmen zu ergreifen, um sie herauszufiltern.

Hier sind einige Tipps zum Herausfiltern von Dud-Teilnehmern:

  • Prüfen Sie, ob sie Ihren Dienst bereits nutzen: Wenn Sie für Personen werben, die bereits einen Live-Service nutzen, fragen Sie nach ihrem Benutzernamen und überprüfen Sie die Datenbank auf die Dauer, während der sie Mitglied ist. Sehen Sie sie aus, wenn sie an dem Tag, an dem sie den Fragebogen ausgefüllt haben, „zufällig“ beigetreten sind.
  • Verbergen Sie Ihre Absicht durch Multiple-Choice-Fragen: z.B. Anstatt zu fragen, ob sie ein Radsportfan sind, fragen Sie sie, welche Bewegungsformen sie am meisten mögen und wo Radfahren nur eine der Optionen ist. Auf diese Weise weiß ein entschlossener Lügner nicht, welche Antwort er stellen soll.
  • Stellen Sie Fragen, um ihre Artikulation zu bewerten: Es ist ratsam, offene Freitext-Fragen zu stellen. Wenn sie in der Lage sind, sich lyrisch über das Forschungsthema zu äußern, werden sie für ein Interview wertvoll sein.
  • Nicht-Ausgabende herausfilternWenn Sie an einem Premium-Service arbeiten, benötigen Sie Benutzer, die tatsächlich Geld zur Verfügung haben und bereit sind, es für das Problem auszugeben, das Ihre App bei der Lösung versucht. In diesem Fall ist es sinnvoll, nach Einkommensniveau und monatlichen Ausgaben für verwandte Dinge (z. B. App-Abonnements) zu filtern..

Benutzer finden, um Ihren Fragebogen auszufüllen

Wenn Sie ein Live-Produkt haben, besteht die Chance, dass Sie bereits über eine anständige Marketing-E-Mail-Liste verfügen, an die Sie eine E-Mail senden können. Ihr Mailing sollte kurz sein und eine einzige große Handlungsaufforderung enthalten, in der die Benutzer aufgefordert werden, sich zu bewerben. Auf der ersten Seite des Fragebogens können Sie weitere Details angeben.

Wenn Sie Traffic haben, aber keine E-Mail-Liste, können Sie Benutzer auch dazu bringen, eine Lightbox oder einen ähnlichen Handlungsaufruf auf Ihrer Website zu platzieren. Sie können dies mit Ethnio (das eine Reihe weiterer nützlicher Rekrutierungsfunktionen bietet), Qualaroo oder Sie können Ihr Dev-Team bitten, eine E-Mail zu erstellen und die E-Mail-Adressen an Mailchimp, Campaign Monitor oder das von Ihnen verwendete E-Mail-Marketing-Tool zu senden.

Wenn Sie ein anständiges soziales Medium verfolgen, können Facebook oder Twitter gut funktionieren. Wenn Sie gerade erst anfangen und nichts davon haben, können Craigslist und Gumtree funktionieren.

Wenn Sie mehr als einen Ansatz verwenden, stellen Sie sicher, dass Sie alle den gleichen Fragebogen verwenden. Bei einigen Fragebogenplattformen können Sie URL-Parameter hinzufügen oder nach URL filtern, um herauszufinden, welcher Kanal am besten funktioniert.

Screening von Benutzern und Buchung von Interviews

Sobald Sie eine anständige Gruppe von Befragten haben, können Sie die Antworten durchgehen, um die besten auszuwählen. Dies wird als "Screening" bezeichnet..

Beginnen Sie mit Ihren strukturierten Fragen und filtern Sie die offensichtlich irrelevanten Kandidaten heraus. Dies ist einfach zu bewerkstelligen, wenn Sie die Antworten nach Excel exportieren und die Daten ›filter Merkmal. Von dort können Sie ihre Freitextantworten lesen. Suchen Sie sich Personen aus, die etwas zu sagen haben und sich aktiv für das Problem oder den Job interessieren, mit dem Ihr Service versucht, ihnen zu helfen.

Sobald Sie Ihre Auswahl getroffen haben, senden Sie ihnen eine E-Mail mit der Nachricht, dass ihre Bewerbung erfolgreich war und dass sie zur Teilnahme an der Untersuchung eingeladen werden. Verwenden Sie ein Zeitplanungstool wie usepowwow.com, mit dem Sie einen Anmelde-Link senden können, der Ihnen eine Liste der Sitzungszeiten bietet, die sie buchen können (Abbildung unten). Es ist auch eine gute Idee, ihnen einige Informationen zu senden, in denen erläutert wird, wie Google Hangouts eingerichtet wird.

usepowwow.com: ein Tool zur Planung von Forschungssitzungen

Erleichterung der Sitzung

Lassen Sie uns einige Regeln für die Sitzung selbst behandeln.

Bereiten Sie Ihren Diskussionsleitfaden im Voraus vor

Sie sollten sich auf Usability-Testsitzungen vorbereiten, indem Sie einen Diskussionsleitfaden mit den Benutzeraktivitäten und den Fragen, die Sie stellen möchten, schreiben. Behandle es nicht als Drehbuch; behandele es als Leitfaden.

Eine gute Möglichkeit, um eine Sitzung zu beginnen, ist mit einer "offenen Erkundungsaufgabe" zu beginnen. Mit unserer fiktiven Radsport-App könnte man zum Beispiel sagen „Stellen Sie sich vor, ein Freund hat Ihnen diese App empfohlen, aber Sie wissen nichts darüber. Installieren Sie es und probieren Sie es aus, um herauszufinden, ob Sie denken, dass es gut ist. ”. Sie können dann die App über ihren eigenen Pfad erkunden. Dieser Ansatz führt dazu, dass sie eher in einen selbstmotivierten Interaktionsfluss geraten als eine Reihe von kleinen mikromanagmentierten Aufgaben "Bitte füllen Sie das Anmeldeformular aus und stoppen Sie dann". Wenn der Teilnehmer die anfängliche offene Erkundungsaufgabe abgeschlossen hat, können Sie ihm einige andere Aufladeaktivitäten geben, um alles abzudecken, was er nicht von sich aus getan hat.

Machen Sie sich während der Sitzung Notizen

Es gibt keinen „richtigen Weg“, um sich Notizen zu machen, es kommt darauf an, was Sie am besten können. Wenn Sie schlechtes Schreiben von Hand haben und eine hervorragende Schreibkraft sind, ist es sinnvoll, Notizen direkt auf Ihrem Laptop zu erstellen (Sie benötigen zwei Monitore, um die Sitzung des Benutzers auf einem Bildschirm und Ihre Notizen auf dem anderen zu sehen ). Wenn Sie nicht gerne tippen, können Sie sich Notizen auf Papier machen. Einige Forscher schwören auf Geräte wie den Livescribe-Stift. Unabhängig vom gewählten Medium ist es nützlich, einen Zeitstempel zu schreiben, wenn etwas Interessantes passiert. Später können Sie beim schnellen Vorlauf durch das Video die Zeit in der Ecke des Bildschirms beobachten.

Lassen Sie Ihre Kollegen live beobachten

Wenn die Projektbeteiligten Live-Sitzungen verfolgen, ist die Forschung tendenziell viel erfolgreicher, da sie die Ergebnisse mit eigenen Augen gesehen und die wahre Schwere der beobachteten Probleme verstanden hat.

Stakeholder können beobachten, ob sie sich aus der Ferne verbinden oder mit Ihnen im Raum sitzen. Stellen Sie sicher, dass Sie den Benutzern mitteilen, dass dies aus Höflichkeit geschieht. Wenn Ihre Kollegen über Google Hangouts eine Verbindung herstellen, stellen Sie sicher, dass sie Mikrofon und Kamera stummschalten. Wenn Sie entspannt und freundlich sind, wird der Benutzer sie bald vergessen.

So führen Sie ein effektives Interview durch

Versuchen Sie, das Interview als einen netten Chat zu sehen, in dem Sie wirklich in die Sicht eines Benutzers eintauchen und sich in sie einfühlen können. Es gibt viele kleine Fehler, die Sie machen können, und Sie werden nur durch das Üben Ihrer Interviewtechnik überwunden. Hier sind einige Tipps:

Problem Was du machen solltest
Ist der Teilnehmer still geworden??
Sprich: "Was denkst du?"
Redest du mehr als sie sind??
Verschnaufpause, sie brauchen Zeit zum Nachdenken.

Hat der Benutzer Sie um Hilfe gebeten?


Sprich: "Kannst du einen Weg finden, diese Frage selbst zu beantworten?"
Ist etwas Interessantes passiert??
Sagen Sie: "Was ist dort gerade passiert?"
Haben sie etwas interessantes gesagt, sind aber darüber gestürzt?
Sagen Sie: "Könnten Sie das für mich wiederholen?"
Hat der Benutzer Schwierigkeiten, die Aufgabe abzuschließen??
Lassen Sie sie sich bemühen und notieren, wann und wie sie aufgeben.

Zahlende Benutzer

Nachdem die Sitzung erfolgreich abgeschlossen wurde, können Sie dem Teilnehmer eine Online-Zahlung senden. Amazon Gutscheine sind praktisch, weil es einfach ist, Gutscheine gleichzeitig an mehrere Personen zu versenden. Ihr Arbeitgeber sollte dafür bezahlen, oder wenn Sie freiberuflich tätig sind, sollten Sie sich im Voraus damit einverstanden erklären, dies als "Weiterleitungskosten" zu berechnen..

Analyse und Empfehlungen

Analyse ist der schwierigste Teil der Benutzerforschung. Dazu müssen die Beobachtungen zusammengefasst und dann Designempfehlungen gegeben werden. Wenn zum Beispiel 8/10 Benutzer Schwierigkeiten haben, die Registrierungsschaltfläche zu finden, empfiehlt es sich, sie als viel prominenter zu empfehlen und auf allen abgemeldeten Seiten zu erscheinen.

Die meisten Beobachtungen sind nicht so eindeutig, und es braucht viel Erfahrung, um herauszufinden, welche Art von Designänderungen erforderlich sind und ob einige Beobachtungen "mit einer Prise Salz" aufgenommen werden können oder nicht. Einer der häufigsten Fehler bei der Benutzerrecherche besteht darin, dass das obere Management versucht, die Kosten zu senken, indem der Umfang der Änderungen auf geringfügige Kopienänderungen oder andere oberflächliche Aspekte beschränkt wird. Dies ist ein kurzfristiges Denken: Das Ignorieren von Forschungsergebnissen und das Starten von Funktionen, die nicht verwendbar sind oder nützlich sind, bedeutet, dass sie langfristig scheitern werden. Um dies zu vermeiden, stellen Sie sicher, dass Ihre Forschung von Anfang an von führenden Stakeholdern eingekauft wird, sodass sie bei Bedarf große Konstruktionsänderungen vornehmen kann. Manchmal muss eine UI, die sehr schlecht getestet wird, nur abgerissen und erneut gestartet werden.

Ergebnisprotokoll erstellen

Ein Befundungsprotokoll ist eine Tabelle, in der Sie Ihre Beobachtungen als Zeilen und deren Vorkommen nach Benutzern als Spalten auflisten. Sie erhalten einen guten Überblick über das, was ansonsten einige Stunden Videomaterial oder Dutzende von Transkriptionsseiten wären.

Eine typische Tabelle mit Befundprotokollen

Das Erstellen eines Befundungsprotokolls ist unkompliziert, aber zeitaufwändig. In der Regel sollten Sie ungefähr so ​​viel Zeit für die Analyse einplanen, wie Sie für die Recherche aufgewendet haben. Wenn Sie viele verschiedene Benutzertypen oder viele verschiedene Bereiche der Benutzererfahrung testen, dauert es viel länger. Sie werden sich nach einigen Projekten ein Gefühl dafür verschaffen.

Hier sind die Schritte, die Sie durchführen müssen, um ein gutes Befundprotokoll zu erstellen:

  1. Gehen Sie Ihre Notizen für jeden Benutzer durch. Wenn Sie Anhaltspunkte für ein Usability-Problem sehen, fügen Sie es als Ergebnisreihe in das Befundprotokoll ein und geben Sie die Zahl "1" als Zähler für den Benutzer ein, bei dem Sie das Ereignis beobachtet haben.
  2. Wenn der Tisch wächst, kombinieren Sie ähnliche Beobachtungen, wenn Sie können. Zum Beispiel "Der Benutzer hat Schwierigkeiten, die Registrierungsschaltfläche auf der Startseite zu finden" und "Der Benutzer beschwert sich darüber, dass er die Registrierungsschaltfläche beim Durchsuchen der Startseite nicht finden konnte." kann zu einem kombiniert werden.
  3. Sie werden mit ungefähr 20-30 Beobachtungen enden wenn Ihr Test aus einer Gruppe von Benutzern bestand, die nur einen kleinen Satz von Funktionen betrachtet. Wenn Sie dies zusammengestellt haben, können Sie zur Empfehlungsspalte wechseln.
  4. Schreiben Sie für jede Beobachtung eine Empfehlung. Es ist sinnvoll, mehr als eine Idee vorzuschlagen oder Empfehlungen in zwei Spalten aufzuteilen: eine für langfristige und eine für kurzfristige Korrekturen. Wenn Ihnen keine gute Empfehlung einfällt, können Sie dies einfach sagen („nicht klar, welche Maßnahmen erforderlich sind“) oder Sie können weitere Untersuchungen vorschlagen.

Sobald das Ergebnisprotokoll fertig ist, können Sie loslegen.

Zum Schluss: Designänderungen durchführen lassen

Wenn Ihre Projektbeteiligten die Sitzungen nicht beobachtet haben, müssen Sie an dieser Stelle eine Präsentation halten, um ein Buy-in zu erhalten. Es ist ziemlich Standard, ein Dia-Deck zu erstellen, in dem Sie Screengrabs zeigen, um jeden Befund darzustellen. Wenn Sie Zeit haben, können Sie auch einige Highlight-Clips erstellen, um die wichtigsten Ergebnisse zu veranschaulichen (Quicktime verfügt über eine Funktion zum Aufteilen von Clips, die die Aufgabe erfüllt). Es ist rundum besser, wenn Sie die Stakeholder dazu bringen, die Sitzungen live zu sehen, oder zumindest die Aufzeichnungen ansehen. Dies führt dazu, dass sie sich mit den Benutzern viel mehr einfühlen und mehr bereit sind, Designänderungen vorzunehmen.

Der nächste Schritt besteht darin, eine Einigung über den agilen Auftragsbestand oder die Produkt-Roadmap zu erzielen. Dies kann schwierig sein: Manchmal müssen Sie um Forschungsergebnisse kämpfen, um aktiv zu werden. Wenn dies der Fall ist, möchten Sie möglicherweise einige neue Spalten zur Befundungsprotokolltabelle hinzufügen: Kosten und Auswirkungen. Sie können dann eine Gruppensitzung mit den Projektbeteiligten durchführen, in der Sie zusammenarbeiten, um jeder Beobachtung grobe T-Shirt-Größen für Kosten und Auswirkungen (S / M / L / XL) zu geben. Sie können sich dann auf die Dinge konzentrieren, die wahrscheinlich die geringsten Kosten und die größte Auswirkung haben (alias die "niedrig hängende Frucht"). Nachdem Sie den Nutzen von Remote-Usability-Tests nachgewiesen haben, werden Sie feststellen, dass Sie größeren Einfluss haben.

Schlussgedanken

Sie haben wahrscheinlich aus diesem Artikel abgeleitet, dass die Benutzerrecherche einen erheblichen Aufwand erfordert - und diese Tatsache schreckt viele Menschen ab. Lass dich nicht davon abhalten. Denken Sie daran, wenn Sie etwas ohne Benutzerforschung entwerfen, ist es viel wahrscheinlicher, dass Ihr Produkt auf dem Markt versagt. Auch wenn Sie sich als Designer oder Entwickler betrachten, sollten Sie die Benutzerforschung wissen, wenn Sie großartige Benutzererlebnisse erzielen möchten.

Nützliches Lesen

  • Usability-Test-Tools für schnelles und frühes Feedback

    In diesem Beitrag werde ich erklären, wie Sie Usability-Testsitzungen remote oder intern durchführen können, um Ihre Entwürfe zu validieren und das bestmögliche Ergebnis zu liefern.
    Andreia Paralta Carqueija
    Verwendbarkeit