Unmoderierte Usability-Tests funktionieren nur mit sauber strukturierten Daten. Host Markus Pirker spricht mit UX Researcher Marc Busch darüber, warum Struktur bei unmoderierten Tests entscheidend ist, welche UX-Metriken zählen und warum seine selbstgebauten AI-moderierten Interviews schlechter abschnitten als eine simple Umfrage.
Wer ist Marc Busch?
Marc Busch ist UX Researcher mit fast 15 Jahren Erfahrung und Hintergrund in Psychologie. Er hat über 1.000 moderierte UX-Tests und Interviews durchgeführt, unterrichtet Research-Methoden an Universitäten und ist Autor von "UX Research: Building Blocks for Impact in the Age of AI".
Warum Struktur bei unmoderierten User Tests entscheidend ist
Marc erklärt, dass unmoderierte Tests darauf angewiesen sind, strukturierte Daten zu liefern. Ohne klare Struktur bleibt am Ende nur eine unbelegbare Zusammenfassung, der niemand vertraut.
Für wen ist diese Folge relevant?
Die Folge richtet sich an UX-Designer:innen, UX-Researcher:innen, UX-Writer:innen und Product Manager:innen mit der Frage: Wie liefern unmoderierte Tests belastbare, nachvollziehbare Ergebnisse?
Sind AI-moderierte Interviews schlechter als eine Umfrage?
Marc hat monatelang ein eigenes AI-moderiertes Interview-Tool gebaut und mit 60 Testpersonen getestet. Sein Fazit: Ohne nachvollziehbare Konversation bleibt eine AI-Zusammenfassung eine Blackbox – oft schwächer als eine Survey.
Welche UX-Metrik hat wirklich Business-Impact?
Trotz aller Kritik setzt Marc auf die System Usability Scale kombiniert mit dem Net Promoter Score – beide genießen breite Anerkennung und lassen sich gut vergleichen.
Timestamps
(00:00) Intro
(01:51) Größtes Learning aus 1.000+ Tests
(02:41) Strukturierte vs. unstrukturierte Interviews
(09:02) Aufbau eines Test-Scripts
(12:56) Warum Time on Task oft wenig aussagt
(19:52) SUS und NPS als wichtigste Metriken
(25:15) Strukturierte Daten bei unmoderierten Tests
(31:04) Das Experiment: AI-moderierte Interviews
Marcs Links
Marcs LinkedIn
Artikel zu AI-moderierten Interviews
Userbrain Webinar: AI as your UX Research Assistant
Marcs Buchempfehlung
Benchmarking the User Experience - Jeff Sauro
Ähnliche Folgen
E101: Konrad Maruschewski über iteratives User Testing
E97: Manuel Schnell über KI im Usability-Testing
E92: Simon Meisinger über User Testing im Team
Danke fürs Zuhören
Ich hoffe, ihr konntet aus dieser Folge von UX Heroes konkrete Ideen für bessere User Experiences mitnehmen. Wenn ihr auch die nächsten Episoden nicht verpassen wollt, abonniert UX Heroes auf Spotify, Apple Podcasts oder in eurer Lieblings-Podcast-App.
Eine Bewertung oder 5-Sterne-Rezension hilft uns sehr dabei, noch mehr Menschen zu erreichen, die sich für UX Design, UX Research, Product Discovery und bessere digitale Produkte interessieren.
Habt ihr Fragen, Feedback oder Themenvorschläge? Dann schreibt uns gerne an podcast@userbrain.com. Ihr findet mich auch auf LinkedIn unter Markus Pirker.
Bessere UX-Entscheidungen mit Userbrain
UX Heroes ist ein Podcast von Userbrain. Mit Userbrain könnt ihr schnelle und unkomplizierte User Tests durchführen, um herauszufinden, wie echte Nutzer:innen eure Website, App, euren Prototypen oder eure Produktidee erleben.
Dank KI-Unterstützung erstellt ihr euren User Test in wenigen Minuten. Erste Ergebnisse sind innerhalb weniger Stunden verfügbar, damit ihr schneller erkennt, wo Nutzer:innen Probleme haben, was sie verwirrt und welche Verbesserungen wirklich wichtig sind.
Userbrain hilft UX-Teams, Product Manager:innen, Marketer:innen und Gründer:innen dabei, bessere Entscheidungen auf Basis von echtem Nutzerfeedback zu treffen.
Kostenlos mit Userbrain starten
Probiert Userbrain aus und startet euren ersten User Test: Geht auf userbrain.com/podcast, erstellt einen kostenlosen Account und bekommt die ersten 2 Tester:innen im Wert von 90 € geschenkt.
