Damit eine Stichprobe m\u00f6glichst repr\u00e4sentativ wird, sollte darauf geachtet werden, dass Personen aus allen Bereichen der Grundgesamtheit ber\u00fccksichtigt werden.<\/p>\n
![\"Stichprobe](\"https:\/\/www.centigrade.de\/wordpress\/wp-content\/uploads\/WP_Stichprobe-1024x576-1.jpg\")
Abbildung 1: cloudfront.net\/wp-content\/uploads\/2022\/02\/WP_Stichprobe-1024×576.jpg<\/a><\/p><\/div>\n Das Beispiel im Bild w\u00e4re also nur eingeschr\u00e4nkt repr\u00e4sentativ, da die rot markierten Personen in der Grundgesamtheit die Mehrheit ausmachen, in der Stichprobe jedoch \u00fcberhaupt nicht ber\u00fccksichtigt werden.<\/p>\n Die Abbildung ist jedoch nicht eins-zu-eins auf das nutzerzentrierte Vorgehen im UX-Bereich zu \u00fcbertragen, da die Stichprobe hier aus einer konkreten Nutzergruppe gezogen wird. Da eine Nutzergruppe meist durch eine Persona mit bestimmten Motivationen, Frustrationen und Eigenschaften repr\u00e4sentiert wird, sollte versucht werden vor allem die projektrelevanten Aspekte der Personen repr\u00e4sentativ abzubilden.<\/p>\n Auf den ersten Blick k\u00f6nnte man vermuten, dass man mit immer mehr Testpersonen, auch aussagekr\u00e4ftigere Ergebnisse erzielen kann. Doch warum werden dann gerade im User Research h\u00e4ufig nur 4-5 Personen in Usability Tests oder Interviews herangezogen? Und warum werden auf der anderen Seite in wissenschaftlichen Studien teils mehrere hundert Teilnehmende rekrutiert? Kann man mit dieser Handvoll Tester*innen im User Research \u00fcberhaupt fundierte Aussagen \u00fcber ein neuentwickeltes Produkt treffen, das sp\u00e4ter einmal einer gr\u00f6\u00dferen Nutzergruppe dienen soll?<\/p>\n Um diese Fragen zu beantworten, werfen wir zun\u00e4chst einen Blick auf die wissenschaftliche Perspektive der Stichprobenwahl.<\/p>\n Gerade in psychologischen Studien wird nicht einfach blind darauf losgetestet. Es wird bereits im Vorhinein die ben\u00f6tigte Anzahl an Versuchsteilnehmer*innen berechnet, um anschlie\u00dfend so lange Personen zu erheben, bis die gew\u00fcnschte Anzahl erreicht wird. Bei der Erhebung muss immer die Repr\u00e4sentativit\u00e4t im Auge behalten werden, damit keine Verzerrungen entstehen. Gerade durch den \u201eSampling Bias\u201c k\u00f6nnen hier Probleme entstehen. Diese und andere Verzerrungen in Nutzerstudien werden in einem der folgenden Blogartikel n\u00e4her beleuchtet.<\/p>\n Doch woher wei\u00df man nun, wie viele Teilnehmende ben\u00f6tigt werden? Die ben\u00f6tigte Anzahl nennt sich \u201eoptimaler Stichprobenumfang<\/strong>\u201c und wird statistisch errechnet. Die Berechnung erspare Ich Ihnen an dieser Stelle. Ohnehin wird daf\u00fcr meist das freie Softwareprogramm \u201eG*Power<\/a>\u201c verwendet.<\/p>\n Der optimale Stichprobenumfang erf\u00fcllt zwei Bedingungen:<\/p>\n Der optimale Stichprobenumfang stellt also einen Kompromiss zwischen praktischer Relevanz (Kosten und Aufwand) und statistischer Bedeutsamkeit (der erwartete Effekt wird gefunden)<\/strong> dar. Die vorherige Berechnung der erforderlichen Personen spart vor allem Ressourcen und soll trotz alledem daf\u00fcr sorgen, dass der erwartete Effekt gefunden wird. Gerade dieser \u00f6konomische Faktor spielt auch bei der Definition der Stichprobengr\u00f6\u00dfe f\u00fcr Usability Tests und User Interviews eine gro\u00dfe Rolle, da die meisten Projekte nur ein begrenztes Budget haben.<\/p>\n Der \u201eReturn on Investment<\/strong>\u201c oder kurz \u201eROI<\/strong>\u201c ist eine Kennzahl, die den Gewinn einer T\u00e4tigkeit im Verh\u00e4ltnis zu Ihren Kosten darstellt. Im Beispiel von User Tests oder Interviews bedeutet das, dass jede rekrutierte und getestete Person ein Unternehmen zun\u00e4chst einmal Geld kostet (Kosten). Gleichzeitig werden n\u00fctzliche Informationen \u00fcber ein Produkt generiert (Nutzen). Werden nun immer mehr Personen mit demselben Testmaterial getestet, addieren sich die Kosten auf, w\u00e4hrend die neu dazugewonnenen Informationen weniger werden. Der ROI sinkt. Die Nielsen-Norman-Group<\/a>, die weltweit f\u00fchrende Forschungsgruppe im Bereich Usability und User Experience, hat dies am Beispiel der gefundenen User Probleme in einem Usability Test deutlich gemacht.<\/p>\n Abbildung 2: www.nngroup.com\/articles\/why-you-only-need-to-test-with-5-users\/<\/a><\/p><\/div>\n Daher muss genau abgew\u00e4gt werden, wie viele Testpersonen man f\u00fcr ein Projekt heranzieht, um das Budget f\u00fcr den User Research nicht zu sprengen, aber gleichzeitig alle wichtigen Informationen f\u00fcr die Entwicklung zu bekommen. Doch wie w\u00e4gt man nun am besten ab, wie viele Personen man testet?<\/p>\n Eine naheliegende L\u00f6sung f\u00fcr dieses Problem w\u00e4re, sich einfach am Vorbild der Wissenschaft zu orientieren und eine optimale Stichprobengr\u00f6\u00dfe f\u00fcr das jeweilige Projekt zu errechnen. Doch warum findet dies in der Praxis so gut wie keine Anwendung?<\/p>\n In wissenschaftlichen, speziell psychologischen Studien dreht sich alles um Statistik. Man m\u00f6chte signifikante Ergebnisse und gro\u00dfe Effektst\u00e4rken aufzeigen. Gerade daf\u00fcr ist es auch von N\u00f6ten die optimale Stichprobengr\u00f6\u00dfe zu bestimmen. Im User Research geht es weniger darum, eine m\u00f6glichst hohe Effektst\u00e4rke bei der Nutzung eines Produktes zu erzielen oder signifikante Unterschiede zwischen zwei Prototypen zu finden. H\u00e4ufig geht es um die qualitativen Eigenschaften <\/strong>eines Produktes und die Nutzungsprobleme<\/strong>, die auftreten k\u00f6nnen. Die Frage, die sich im User Research also gestellt werden muss, ist die folgende:<\/p>\n Wie viele Personen muss ich mindestens befragen\/testen, damit ich ein Produkt entwickeln kann, das die Zielgruppe ansprechend findet und das sich ohne Probleme bedienen l\u00e4sst?<\/em><\/p>\n F\u00fcr diese Frage ist die Antwort nicht die optimale Stichprobengr\u00f6\u00dfe aus wissenschaftlichen Studien.<\/p>\n Die entschiedene Antwort lautet: Es kommt auf die verwendete Methodik an.<\/p>\n Die Nielsen-Norman-Group hat bereits Anfang der 2000er versucht, eine Antwort auf diese Frage zu finden und kommt seitdem auf verschiedene Ergebnisse f\u00fcr unterschiedliche Methoden des User Researchs. Im Folgenden wollen wir uns Usability Tests und Interviews etwas genauer anschauen.<\/p>\n In den meisten Usability Tests wird eine optimale Stichprobengr\u00f6\u00dfe von 5 +\/- 2 verwendet. Diese Anzahl basiert auf den Empfehlungen der Forschungsgruppe. Die Forscher*innen argumentieren dabei mit der Anzahl der Usability Probleme, die pro Testperson aufgedeckt werden (siehe vorherige Abbildung).<\/p>\n Wie man in der Grafik erkennen kann, deckt man mit einer Stichprobengr\u00f6\u00dfe von nur 5 Personen, ca. 75% der Usability Probleme in einem Produkt auf. Testet man mehr als 5 Personen, \u00fcberwiegen im Schnitt die Kosten gegen\u00fcber den wenigen Extra-Informationen. Der ROI w\u00e4re also zu gering. Die Empfehlung lautet daher, mit einer Stichprobengr\u00f6\u00dfe von ungef\u00e4hr 5 Personen einen Usability Test durchzuf\u00fchren und im Verlauf der Produktentwicklung so viele Usability Tests wie es das Budget zul\u00e4sst einzubauen, damit das Produkt kontinuierlich verbessert wird.<\/p>\n Bei User Interviews verh\u00e4lt es sich ein wenig anders. Hier gibt es n\u00e4mlich nicht einfach die eine Zahl, an die man sich halten kann. Dennoch zeichnet sich auch hier ein \u00e4hnliches Bild zu den Usability Tests ab. Mehr Personen bringen mehr Ergebnisse, jedoch auch nur bis zu einem gewissen Punkt.<\/p>\n Abbildung 3: www.nngroup.com\/articles\/interview-sample-size\/<\/a><\/p><\/div>\n In Interviews geht es oft um die qualitativen Erfahrungen der Nutzer*innen, weshalb die Zahl der ben\u00f6tigten Personen laut der Nielsen-Norman-Group von zwei Faktoren abh\u00e4ngt. Zum einen kommt es auf die Fragestellung und den Scope an. Ist dieser weit gefasst, so braucht es auch mehr Personen, um valide Ergebnisse zu generieren. Ist der Scope schmal, so k\u00f6nnen auch nur f\u00fcnf Personen ausreichen, um repr\u00e4sentative Ergebnisse zu liefern. Daher versuchen wir bei Centigrade in unseren Projekten zu Beginn m\u00f6glichst eng zu scopen, damit wir f\u00fcr diesen Scope m\u00f6glichst sichere Ergebnisse erhalten. Zum anderen kommt es auf die Diversit\u00e4t der Nutzer*innen an. F\u00fcr diversere Nutzer*innen ben\u00f6tigt es mehr Testpersonen als f\u00fcr eine spezielle Gruppe an Nutzer*innen, damit die Repr\u00e4sentativit\u00e4t gew\u00e4hrleistet ist. Die Empfehlung der Nielsen-Norman-Group ist daher klein anzufangen (z.B. mit f\u00fcnf Testpersonen). Wenn w\u00e4hrend der Tests auff\u00e4llt, dass alle Testpersonen viele neue Informationen generieren, so kann die Anzahl der Testpersonen schrittweise erh\u00f6ht werden, bis ausreichend Informationen gesammelt wurden.<\/p>\n Zusammenfassend l\u00e4sst sich also festhalten, dass es im User Research h\u00e4ufig ausreichend ist, nur eine geringe Anzahl von etwa f\u00fcnf Testpersonen zu befragen. Der Unterschied im Erkenntnisgewinn zu einer gro\u00dfen Stichprobe ist h\u00e4ufig nur gering und die Kosten werden bei weniger Tester*innen klein gehalten. Gerade bei schmalen Scopes ist es lohnenswert, weniger Personen zu testen. Dennoch sollte bei der Auswahl der Stichprobe immer die Repr\u00e4sentativit\u00e4t im Auge behalten werden und falls es die Fragestellung oder die Methode verlangt, auch zu mehr Testpersonen gegriffen werden.<\/p>\n <\/p>\n Sauro, J., & Lewis, J. R. (2016).\u00a0Quantifying the user experience: Practical statistics for user research<\/em>. Morgan Kaufmann.<\/p>\n https:\/\/www.netizenexperience.com\/blog\/usability-testing-how-many-test-users\/<\/a><\/p>\n https:\/\/www.redalyc.org\/journal\/5722\/572262176013\/html\/<\/a><\/p>\n https:\/\/dorsch.hogrefe.com\/stichwort\/optimaler-stichprobenumfang<\/a><\/p>\n https:\/\/studyflix.de\/statistik\/stichprobe-4389 aufgerufen am 05.01.2023<\/a><\/p>\n https:\/\/www.nngroup.com\/articles\/how-many-test-users\/<\/a><\/p>\n https:\/\/www.nngroup.com\/articles\/quantitative-studies-how-many-users\/<\/a><\/p>\n https:\/\/www.nngroup.com\/articles\/interview-sample-size\/<\/a><\/p>\n https:\/\/www.nngroup.com\/articles\/why-you-only-need-to-test-with-5-users\/<\/a><\/p>\n <\/p>\n Wir haben Dein Interesse geweckt? Schau Dir unsere Leistungen<\/a> an!<\/strong><\/p>\nDoch wie viele Testpersonen braucht man dann eigentlich, um ein Produkt sinnvoll zu evaluieren?<\/h2>\n
Die wissenschaftliche Perspektive der Stichprobenwahl<\/h2>\n
\n
Kosten vs. Nutzen<\/h2>\n
![\"Number](\"https:\/\/d1g9li960vagp7.cloudfront.net\/wp-content\/uploads\/2022\/02\/WP_Stichprobe-1024x576.jpg\")
\n
Wie gro\u00df ist denn nun gro\u00df genug?<\/h2>\n
Optimale Stichprobe in Usability Tests<\/h3>\n
Optimale Stichprobe in User Interviews<\/h3>\n
Fazit<\/h2>\n
Quellenverzeichnis:<\/h2>\n