AI-moderierte Interviews im Praxistest

Unmoderierte Usability-Tests funktionieren nur mit sauber
strukturierten Daten. Host Markus Pirker spricht mit UX
Researcher Marc Busch darüber, warum Struktur bei unmoderierten
Tests entscheidend ist, welche UX-Metriken zählen und warum seine
selbstgebauten AI-moderierten Interviews schlechter abschnitten
als eine simple Umfrage.


Wer ist Marc Busch?


Marc Busch ist UX Researcher mit fast 15 Jahren Erfahrung und
Hintergrund in Psychologie. Er hat über 1.000 moderierte UX-Tests
und Interviews durchgeführt, unterrichtet Research-Methoden an
Universitäten und ist Autor von "UX Research: Building Blocks for
Impact in the Age of AI".


Warum Struktur bei unmoderierten User Tests entscheidend
ist


Marc erklärt, dass unmoderierte Tests darauf angewiesen sind,
strukturierte Daten zu liefern. Ohne klare Struktur bleibt am
Ende nur eine unbelegbare Zusammenfassung, der niemand vertraut.


Für wen ist diese Folge relevant?


Die Folge richtet sich an UX-Designer:innen, UX-Researcher:innen,
UX-Writer:innen und Product Manager:innen mit der Frage: Wie
liefern unmoderierte Tests belastbare, nachvollziehbare
Ergebnisse?


Sind AI-moderierte Interviews schlechter als eine
Umfrage?


Marc hat monatelang ein eigenes AI-moderiertes Interview-Tool
gebaut und mit 60 Testpersonen getestet. Sein Fazit: Ohne
nachvollziehbare Konversation bleibt eine AI-Zusammenfassung eine
Blackbox – oft schwächer als eine Survey.


Welche UX-Metrik hat wirklich Business-Impact?


Trotz aller Kritik setzt Marc auf die System Usability Scale
kombiniert mit dem Net Promoter Score – beide genießen breite
Anerkennung und lassen sich gut vergleichen.


Timestamps


(00:00) Intro
(01:51) Größtes Learning aus 1.000+ Tests
(02:41) Strukturierte vs. unstrukturierte Interviews
(09:02) Aufbau eines Test-Scripts
(12:56) Warum Time on Task oft wenig aussagt
(19:52) SUS und NPS als wichtigste Metriken
(25:15) Strukturierte Daten bei unmoderierten Tests
(31:04) Das Experiment: AI-moderierte Interviews


Marcs Links


Marcs LinkedIn
Artikel zu AI-moderierten Interviews
Userbrain Webinar: AI as your UX Research Assistant


Marcs Buchempfehlung


Benchmarking the User Experience - Jeff Sauro


Ähnliche Folgen


E101: Konrad Maruschewski über iteratives User Testing
E97: Manuel Schnell über KI im Usability-Testing
E92: Simon Meisinger über User Testing im Team


Danke fürs Zuhören


Ich hoffe, ihr konntet aus dieser Folge von UX Heroes konkrete
Ideen für bessere User Experiences mitnehmen. Wenn ihr auch die
nächsten Episoden nicht verpassen wollt, abonniert UX Heroes auf
Spotify, Apple Podcasts oder in eurer Lieblings-Podcast-App.


Eine Bewertung oder 5-Sterne-Rezension hilft uns sehr dabei, noch
mehr Menschen zu erreichen, die sich für UX Design, UX Research,
Product Discovery und bessere digitale Produkte interessieren.


Habt ihr Fragen, Feedback oder Themenvorschläge? Dann schreibt
uns gerne an podcast@userbrain.com. Ihr findet mich auch auf
LinkedIn unter Markus Pirker.


Bessere UX-Entscheidungen mit Userbrain


UX Heroes ist ein Podcast von Userbrain. Mit Userbrain könnt ihr
schnelle und unkomplizierte User Tests durchführen, um
herauszufinden, wie echte Nutzer:innen eure Website, App, euren
Prototypen oder eure Produktidee erleben.


Dank KI-Unterstützung erstellt ihr euren User Test in wenigen
Minuten. Erste Ergebnisse sind innerhalb weniger Stunden
verfügbar, damit ihr schneller erkennt, wo Nutzer:innen Probleme
haben, was sie verwirrt und welche Verbesserungen wirklich
wichtig sind.


Userbrain hilft UX-Teams, Product Manager:innen, Marketer:innen
und Gründer:innen dabei, bessere Entscheidungen auf Basis von
echtem Nutzerfeedback zu treffen.


Kostenlos mit Userbrain starten


Probiert Userbrain aus und startet euren ersten User Test: Geht
auf userbrain.com/podcast, erstellt einen kostenlosen Account und
bekommt die ersten 2 Tester:innen im Wert von 90 € geschenkt.