{"id":13110,"date":"2022-09-27T11:00:27","date_gmt":"2022-09-27T09:00:27","guid":{"rendered":"http:\/\/neu.thegeekettez.com\/?p=13110"},"modified":"2023-01-30T16:07:59","modified_gmt":"2023-01-30T15:07:59","slug":"ethical-aspects-usability-test","status":"publish","type":"post","link":"https:\/\/birdux.studio\/en\/ethische-aspekte-usability-test\/","title":{"rendered":"Ethical aspects and principles of usability tests"},"content":{"rendered":"<p>As part of the psychology degree programme, students have to complete a certain number of so-called subject hours for admission to the final thesis. This amounts to around 30 hours in total and serves to familiarise students with research from the perspective of the participants before they plan and carry out psychological studies themselves. Although this is time-consuming, it is really valuable as you become more familiar with some of the pitfalls in communication and the design of the study. You also learn how you feel as a \"test subject\".<\/p>\n\n\n\n<p>Knowing about the feelings and concerns of the test subjects is not insignificant, because studies such as usability tests are also accompanied by a certain psychological pressure on the participants, which in turn can also have a negative impact on the test result.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\">Possible fears of test subjects<\/h2>\n\n\n\n<ul class=\"wp-block-list\">\n<li>\"Stage fright\" or performance anxiety. This pressure to perform can in turn affect self-confidence and self-efficacy and lead to a kind of self-fulfilling prophecy.<\/li>\n\n\n\n<li>Test subjects might feel \"stupid\" if they can't solve tasks or find things in the system. They blame themselves and not the system, it feels like an IQ test to them.<\/li>\n\n\n\n<li>They compare themselves inwardly with other users according to the motto: \"Surely others don't behave so stupidly...\"<\/li>\n<\/ul>\n\n\n\n<p>As moderators of a test, we should therefore always try to put ourselves in the participants' shoes: As test subjects, they are sitting in the \"spotlight\", i.e. they are the centre of observation and are asked to perform tasks with a product that is unknown to them and possibly not optimally usable in front of strangers. It is quite natural to be a little nervous in this situation. The participants then have thoughts such as \"Am I doing this right?\" or: \"Do these people think I'm stupid because I didn't understand?\"<\/p>\n\n\n\n<p>This pressure is real. Jared Spool, an American usability consultant, told a story about seeing a test subject cry during a usability test. This situation came about due to an accumulation of careless behaviour on the part of the moderators and test leaders: the original participant didn't turn up on the day of the test and then an employee who had just completed her first day of work was simply brought in as a quick replacement. The team thought it was a good idea to use her because, unlike other employees, she knew little about the product. There were also a number of observers in the observation room who were not informed about how to behave during a test, including the test person's boss. And last but not least, no pilot test was conducted, so the team did not know that the first task the participants were supposed to complete was in fact completely outdated, incorrectly formulated and therefore impossible to perform. As the woman frantically tried to complete this first task, everyone but her quickly realised that the task was outdated and impossible to complete, and they started laughing at their own stupidity. Unfortunately, the user thought they were laughing at her and she then started to cry.<\/p>\n\n\n\n<p>This is exactly the kind of situation we want to avoid.<\/p>\n\n\n\n<h2 class=\"wp-block-heading\">How to respond to these fears<\/h2>\n\n\n\n<p>We can counter such fears by repeatedly emphasising, for example, that we are not testing the test person, but the system. This \"<em>I'm too stupid to use the computer\"<\/em>&nbsp;is unfortunately based on internalised thinking.&nbsp;<a href=\"https:\/\/www.hanselman.com\/blog\/bad-ux-and-user-selfblame-im-sorry-im-not-a-computer-person\" target=\"_blank\" rel=\"noreferrer noopener\">Self-blaming<\/a>&nbsp;is a problem here. Many users of computer systems still think that it's their fault if something doesn't work, that they can't handle the software \"properly\" and blame themselves rather than the system.<\/p>\n\n\n\n<p>Here is a sentence that we like to repeat like a prayer wheel in this or a modified form during tests:<br>\"<em>We don't test you, we test the system.\"<\/em>&nbsp;and:&nbsp;&nbsp;<em>\"Any problems you may have are the fault of the system. And we need your help to track down these problems in order to make the system better and easier to use. You help to assess\/evaluate the system as we are too blind to it.\"<\/em><\/p>\n\n\n\n<p>The wording\/framing - i.e. how the test itself is labelled - also plays a role here. For example, when we talk about \"user testing\", this implies that we want to test the user. But this is not the case. We are testing the usability of the system, which is why it is more appropriate to speak of \"usability testing \/ verification\" - above all&nbsp;<em>before&nbsp;<\/em>the users.<\/p>\n\n\n\n<p>Appreciative and respectful behaviour also plays a major role. Sounds obvious, but it is important to remember this time and again, especially when things get hectic.<\/p>\n\n\n\n<p><strong>Therefore, here are some basic and simple ways to reduce psychological stress in test subjects and conduct a usability test according to ethical guidelines.<\/strong><\/p>\n\n\n\n<h2 class=\"wp-block-heading\">11 ethical principles for a usability test<\/h2>\n\n\n\n<ol class=\"wp-block-list\">\n<li><strong>Language<\/strong>. We&nbsp;<a href=\"https:\/\/birdux.studio\/en\/ux-thoughts-language-matters\/\">argue in favour of avoiding the term \"user test\"<\/a>.  We don't test the user, we test a system with the help of the user.<\/li>\n\n\n\n<li><strong>Creating a friendly atmosphere<\/strong>. The atmosphere should be relaxed and free from distractions and interruptions such as questions from others. Drinks and small snacks are always welcome during in-person tests.<\/li>\n\n\n\n<li><strong>Let the test person arrive<\/strong>. A welcome and some small talk are important for participants to \"arrive\" and relax. This should therefore be included in the schedule.<\/li>\n\n\n\n<li><strong>Informed consent.<\/strong>&nbsp;The informed consent should be given to the test subjects a few days before the test and signed and returned to the test team on the day of the test at the latest. This consent should contain information about the purpose of the test and the general procedure of the test. It should also clearly and precisely describe how the results will be used and how it will be ensured that the participant's data is treated confidentially. Participants should be informed comprehensively and clearly about how the data will be used. This means that there should be information about who can access the data, where and for how long the data is stored (GDPR) and how long participants can request the deletion of their data or its non-use - as this is usually difficult once data has been anonymised. The voluntary nature of participation and the possibility for participants to cancel the test at any time should also be mentioned. Furthermore, contact options should be offered for any questions.<\/li>\n\n\n\n<li><strong>Repeat the clarification directly before the test.<\/strong>&nbsp;Before the test begins, it is best to briefly go through all the points that can also be found in the informed consent with the respondents and make sure once again that everything has been understood and that there are no more unanswered questions in this regard. It is advisable to reiterate the anonymisation of the data and explain to the participants that, for example, quotes that appear in reports or presentations cannot be traced back to the respective persons. It should also be pointed out once again that the test subjects are taking the test completely voluntarily and have the right to cancel the test at any time. This means that the test subjects are in control if, for whatever reason, they start to feel unwell, for example.<\/li>\n\n\n\n<li><strong>Warm-up questions\/pre-test interview.&nbsp;<\/strong>Before the actual test, where we start working on the tasks, it is a good idea to start with thematically appropriate general warm-up questions. These questions are usually of interest anyway and of a more open nature, e.g. questions about previous use of the product\/service in question, questions about frequency of use, questions about specific experiences from the last use, etc. This conversation (pre-test interview) helps the respondents to \"wind down\" a little, relax a little and familiarise themselves with the environment and the moderators.<\/li>\n\n\n\n<li><strong>Control non-verbal cues and facial expressions.<\/strong>&nbsp;While we are sitting together with the test subjects, we should never behave impatiently and also have implicit, unconscious behavioural patterns on screen - such as our facial expressions. This is easier said than done, because a lot of behaviour simply happens unconsciously. It is therefore a good idea to include this in the moderation script or to have the topic on the screen. An eyebrow raised at the wrong moment, breathing too loudly or nervously tapping your fingers can be completely misinterpreted and referred to by the respondent to themselves or their performance - with consequences for the test.<\/li>\n\n\n\n<li><strong>Respect participants' time<\/strong>. It is a sign of courtesy if we respect the time of our participants: For us, this means being well prepared and not running over time. This is also where the special role of the so-called pilot test comes into play: the pilot test serves to test our test :) - the test of the test, so to speak. The pilot is very helpful to find out whether our tasks cause confusion or ambiguity or contain errors and whether the test conditions run \"smoothly\" overall. The pilot test runs exactly like a real test, including test person, consent, script etc... and takes place a few days before the first real test. This gives us enough time to make any corrections or formulate tasks in a more comprehensible way.<\/li>\n\n\n\n<li><strong>After the test: Have data usage confirmed again<\/strong>. At the end of the test session, the moderators should again ensure\/ask whether the respondent agrees to the use of the data. It is possible that the participants may change their mind during participation. As already mentioned, it is usually difficult or impossible to withdraw at a later date due to the anonymisation of the data records. This should be clearly communicated.<\/li>\n\n\n\n<li><strong>For remote tests: offer technical setups the day before<\/strong>. For moderated remote test sessions, it makes sense to offer technical setups a day in advance, for example. This gives participants the opportunity to familiarise themselves with the technology, such as screen sharing, using a test page (not the test product itself!). Positive side effect: The test subjects get to know the test team, which reduces the excitement on the day of the test and any fear of contact.<\/li>\n\n\n\n<li><strong>Transparent communication about additional observers<\/strong>. Sometimes managers or developers also want to and should (!) be able to watch the tests. This allows members of the team to experience the problems that users experience when using the system in question at first hand and can be important for establishing an understanding of UX in the company and for improving the user experience.&nbsp;<a href=\"https:\/\/birdux.studio\/en\/ux-maturity-models\/\">increase the UX maturity level of a company.<\/a>&nbsp;On the other hand, it can become problematic if&nbsp;<em>too many&nbsp;<\/em>people observe the test at the same time, as this adds another artificial dimension to the test by making users feel even more \"observed\" and \"tested\". This can increase the pressure to perform and the \"performance anxiety\", which in turn could distort the test results. It is therefore better to have fewer observers and rotate the team per test or test series instead of placing the entire team in the observation room.<\/li>\n<\/ol>\n\n\n\n<p><strong>If there are other people observing the test in addition to the moderators<\/strong>...<\/p>\n\n\n\n<ul class=\"wp-block-list\">\n<li>... should always be pointed out transparently and it makes sense for these people to be present briefly during the welcome. It should always be communicated openly and honestly who is watching and why.<\/li>\n\n\n\n<li>...., we must brief them well on how to behave before, during and after the test. It is important that there are no interruptions due to interposed questions or comments or, as mentioned above, unconscious gestures, facial expressions or noises (snorting, yawning, laughing, finger tapping). We like to tell the story of Jared Spool mentioned above, as it impressively demonstrates how quickly things can unintentionally go wrong.<\/li>\n\n\n\n<li>...it is helpful to hand out some sticky notes to the observers, for example, to avoid interruptions in the form of questions from the observers. In this way, the feeling of an \"urgent\" question that needs to be asked immediately can be neutralised. Here, observers have the opportunity to write down their questions or thoughts directly without interrupting the test. They can then hand them over to us moderators at the end of the test. We briefly review them and then pass these questions on to the respondent if necessary. This should also be scheduled in advance. This procedure ensures that the moderators remain the main point of contact for the test person and there is no restlessness or confusion.<\/li>\n<\/ul>\n\n\n\n<h2 class=\"wp-block-heading\">Conclusion: Make \"test subject hours\"!<\/h2>\n\n\n\n<p>There is certainly a lot more to say, but these basic points should suffice for now. We can only recommend to all designers, product managers and developers that, like psychology students, they also complete \"test subject hours\" and often slip into the role of the test subjects themselves and take part in a usability test from this perspective. This gives you a sense of how it all feels and you can use this experience when designing your own test.<\/p>\n\n\n\n<p><strong>Illustration:<\/strong>&nbsp;<a href=\"https:\/\/storyset.com\/question\" target=\"_blank\" rel=\"noreferrer noopener\">Question illustrations by Storyset<\/a><\/p>","protected":false},"excerpt":{"rendered":"<p>Im Rahmen des Psychologiestudiums m\u00fcssen Studierende eine bestimmte Menge von sogenannten Versuchspersonenstunden f\u00fcr die&nbsp; Zulassung zur Abschlussarbeit durchf\u00fchren. Das sind insgesamt etwa 30 Stunden und dies hat die Funktion, Forschung auch aus der Perspektive der Teilnehmenden kennenzulernen, bevor man selbst psychologische Untersuchungen plant und durchf\u00fchrt. Das ist zwar aufw\u00e4ndig, aber wirklich wertvoll, da man einige [&hellip;]<\/p>\n","protected":false},"author":2,"featured_media":14441,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_et_pb_use_builder":"off","_et_pb_old_content":"<!-- wp:paragraph -->\n<p>Im Rahmen des Psychologiestudiums m\u00fcssen Studierende eine bestimmte Menge von sogenannten Versuchspersonenstunden f\u00fcr die&nbsp; Zulassung zur Abschlussarbeit durchf\u00fchren. Das sind insgesamt etwa 30 Stunden und dies hat die Funktion, Forschung auch aus der Perspektive der Teilnehmenden kennenzulernen, bevor man selbst psychologische Untersuchungen plant und durchf\u00fchrt. Das ist zwar aufw\u00e4ndig, aber wirklich wertvoll, da man einige Fallstricke in der Kommunikation und im Design der Untersuchung besser kennenlernt. Zudem lernt man, wie man sich als \u201cVersuchsperson\u201d f\u00fchlt.<\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:paragraph -->\n<p>Das Wissen um die Gef\u00fchle und Sorgen&nbsp;der Versuchspersonen ist nicht unerheblich, denn Untersuchungen wie Usability-Tests gehen auch mit einem gewissen psychologischen Druck auf die Teilnehmenden einher, der sich wiederum auch negativ auf das Testergebnis \u00fcbertragen kann.<\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:paragraph -->\n<p>Inhaltsverzeichnis:<\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:list -->\n<ul><!-- wp:list-item -->\n<li><a href=\"https:\/\/birdux.studio\/ethische-aspekte-usability-test\/#Moegliche_Aengste_von_Probandinnen\">M\u00f6gliche \u00c4ngste von Proband*innen<\/a><\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><a href=\"https:\/\/birdux.studio\/ethische-aspekte-usability-test\/#Wie_man_auf_diese_Aengste_reagieren_kann\">Wie man auf diese \u00c4ngste reagieren kann<\/a><\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><a href=\"https:\/\/birdux.studio\/ethische-aspekte-usability-test\/#11_ethische_Prinzipien_fuer_einen_Usability-Test\">11 ethische Prinzipien f\u00fcr einen Usability-Test<\/a><\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><a href=\"https:\/\/birdux.studio\/ethische-aspekte-usability-test\/#Fazit_Macht_8222Versuchspersonenstunden8220\">Fazit: Macht \u201eVersuchspersonenstunden\u201c!<\/a><\/li>\n<!-- \/wp:list-item --><\/ul>\n<!-- \/wp:list -->\n\n<!-- wp:heading -->\n<h2>M\u00f6gliche \u00c4ngste von Proband*innen<\/h2>\n<!-- \/wp:heading -->\n\n<!-- wp:list -->\n<ul><!-- wp:list-item -->\n<li>\u201eStage fright\u201c bzw. Performance-Angst. Dieser Leistungsdruck kann sich sich wiederum auf Selbstsicherheit sowie Selbstwirksamkeit auswirken und in eine Art selbsterf\u00fcllende Prophezeiung m\u00fcnden.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li>Proband*innen k\u00f6nnten sich \u201edumm\u201c f\u00fchlen, wenn sie Tasks nicht l\u00f6sen k\u00f6nnen oder Dinge im System nicht finden. Sie schieben sie Schuld auf sich und nicht auf das System, es f\u00fchlt sich f\u00fcr sie an wie ein IQ Test.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li>Sie vergleichen sich innerlich mit anderen Nutzer*innen&nbsp;nach dem Motto: \u201eAndere stellen sich sicher nicht so doof an\u2026\u201c<\/li>\n<!-- \/wp:list-item --><\/ul>\n<!-- \/wp:list -->\n\n<!-- wp:paragraph -->\n<p>Als Moderator*innen eines Tests sollten wir daher immer versuchen, uns in die Situation der Teilnehmenden hinein zu versetzen: Diese sitzen als Proband*innen im \u201cRampenlicht\u201d, sind also Mittelpunkt der Beobachtung und werden aufgefordert, Aufgaben mit einem f\u00fcr sie unbekannten und m\u00f6glicherweise nicht optimal nutzbaren&nbsp;Produkt vor fremden Menschen durchzuf\u00fchren. Es ist ganz nat\u00fcrlich, dass man in der Situation ggf. etwas nerv\u00f6s ist. Bei den Teilnehmenden kommen dann Gedanken auf wie z.B.&nbsp; \u201eMache ich das richtig?\u201c&nbsp; oder: \u201cHalten mich diese Leute f\u00fcr dumm, weil ich es nicht verstanden habe?\u201c<\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:paragraph -->\n<p>Dieser Druck ist real. Jared Spool, ein amerikanischer Usability-Berater, erz\u00e4hlte eine Geschichte dar\u00fcber, wie er eine Testperson w\u00e4hrend eines Usability Tests weinen sah. Diese Situation kam durch eine Anh\u00e4ufung von unbedachtem Verhalten seitens der&nbsp;Moderator*innen und&nbsp;Testleiter*innen zustande: Der urspr\u00fcngliche Teilnehmer tauchte am Testtag nicht auf und dann wurde einfach eine Angestellte, die gerade ihren ersten Arbeitstag absolvierte auf die Schnelle als Ersatz herangezogen. Das Team dachte, dass es eine gute Idee ist, sie zu nehmen, da sie anders als andere Angestellte wenig \u00fcber das Produkt wusste. Im Beobachtungsraum sa\u00dfen zudem eine Reihe von Beobachter*innen,&nbsp; die nicht dar\u00fcber informiert waren, wie sie sich w\u00e4hrend eines Tests verhalten sollten, darunter auch der Chef&nbsp; der Probandin. Und last but not least wurde kein Pilottest durchgef\u00fchrt, so dass das Team nicht wusste, dass die erste Aufgabe, die die Teilnehmenden erledigen sollten, in Wirklichkeit v\u00f6llig veraltet, falsch formuliert und somit unm\u00f6glich durchzuf\u00fchren war. W\u00e4hrend die Frau verzweifelt&nbsp;versuchte, diese erste Aufgabe durchzuf\u00fchren, wurde allen au\u00dfer ihr schnell klar, dass die Aufgabe veraltet und nicht durchf\u00fchrbar&nbsp;war, und sie fingen an, \u00fcber ihre eigene Dummheit zu lachen. Leider dachte die Benutzerin, dass man \u00fcber sie lachte, und sie fing dann&nbsp;an zu weinen.<\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:paragraph -->\n<p>Das ist genau eine Situation, die wir vermeiden m\u00f6chten.<\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:heading -->\n<h2>Wie man auf diese \u00c4ngste reagieren kann<\/h2>\n<!-- \/wp:heading -->\n\n<!-- wp:paragraph -->\n<p>Man kann solchen \u00c4ngsten entgegentreten indem wir&nbsp;z.B. immer wieder betonen, dass wir nicht die Proband*in testen, sondern das System. Dieses \u201e<em>ich bin zu bl\u00f6d, den Computer zu bedienen\u201c<\/em>&nbsp;basiert leider auf internalisiertem Denken.&nbsp;<a href=\"https:\/\/www.hanselman.com\/blog\/bad-ux-and-user-selfblame-im-sorry-im-not-a-computer-person\" target=\"_blank\" rel=\"noreferrer noopener\">Self-blaming<\/a>&nbsp;ist hier ein Problem. Viele Nutzer*innen von Computersystemen denken immer noch, dass es ihr Fehler sei, wenn etwas nicht klappt, dass sie nicht \u201crichtig\u201d mit der Software&nbsp; umgehen k\u00f6nnen und beschuldigen sich eher selbst als das System.<\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:paragraph -->\n<p>Hier ist ein Satz den wir gerne bei Tests in dieser oder abgewandelter Form gebetsm\u00fchlenartig wiederholen:<br>\u201e<em>Wir testen nicht Sie, wir testen das System.\u201d<\/em>&nbsp;und:&nbsp;&nbsp;<em>\u201cJegliche Probleme, die Sie ggf haben werden, sind die Schuld des Systems. Und genau um diese Probleme aufzusp\u00fcren, ben\u00f6tigen wir Ihre Hilfe, um das System besser und gut bedienbar zu machen. Sie helfen, das System zu bewerten\/zu evaluieren, da wir daf\u00fcr zu betriebsblind sind.\u201c<\/em><\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:paragraph -->\n<p>Auch das Wording\/Framing \u2013 also wie man&nbsp; die Untersuchung an sich bezeichnet spielt hierbei eine Rolle. Wenn wir zum Beispiel&nbsp; von \u201cUser testing\u201d sprechen, impliziert dies, dass wir den User testen m\u00f6chten. Dem ist aber nicht so. Wir testen die Nutzbarkeit des Systems, daher&nbsp; sollte man tats\u00e4chlich eher von \u201eUsability Testing \/ \u00dcberpr\u00fcfung\u201d sprechen \u2013 vor allem&nbsp;<em>vor&nbsp;<\/em>den Nutzer*innen.<\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:paragraph -->\n<p>Zudem spielt ein wertsch\u00e4tzender und respektvoller Umgang eine gro\u00dfe Rolle. Klingt eigentlich selbstverst\u00e4ndlich, dennoch ist es wichtig, sich immer wieder daran zu erinnern, gerade wenn es hektisch zugeht.<\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:paragraph -->\n<p><strong>Daher im Folgenden einige grundlegende und einfache M\u00f6glichkeiten um psychologischen Stress bei&nbsp;Proband*innen&nbsp;zu reduzieren und einen Usability Test nach ethischen Richtlinien durchzuf\u00fchren.<\/strong><\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:heading -->\n<h2>11 ethische Prinzipien f\u00fcr einen Usability-Test<\/h2>\n<!-- \/wp:heading -->\n\n<!-- wp:list {\"ordered\":true} -->\n<ol><!-- wp:list-item -->\n<li><strong>Sprache<\/strong>. Wir&nbsp;<a href=\"https:\/\/birdux.studio\/ux-thoughts-language-matters\/\">pl\u00e4dieren f\u00fcr die Vermeidung des Begriffs \u201cUser test\u201d<\/a>.&nbsp; Wir testen nicht den User, wir testen ein System mit Hilfe der Nutzer*innen.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><strong>Schaffen einer freundlichen Atmosph\u00e4re<\/strong>. Die Atmosph\u00e4re sollte entspannt sein und frei von Ablenkungen, St\u00f6rungen wie z.B. Zwischenfragen von anderen gehalten werden. Bei In-Person Tests werden auch Getr\u00e4nke sowie kleine Snacks immer gerne gesehen.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><strong>Proband*in ankommen lassen<\/strong>. Begr\u00fc\u00dfung und etwas Smalltalk sind wichtig zum \u201cAnkommen\u201d und Entspannen der Teilnehmenden.&nbsp;Daher sollte man dies zeitlich mit einplanen.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><strong>Informierte Einwilligung.<\/strong>&nbsp;Die informierte Einwilligung ist einige Tage vor dem Test an die Probanden auszuh\u00e4ndigen und sp\u00e4testens am Tag des Tests unterschrieben an das Testteam zu geben. In dieser Einwilligung sollte \u00fcber den Zweck der Untersuchung und den groben Ablauf des Tests informiert werden. Au\u00dferdem sollte verst\u00e4ndlich und genau beschrieben sein, wie die Ergebnisse verwendet werden und wie sichergestellt wird, dass&nbsp;die Daten des Teilnehmers vertraulich behandelt werden. Die Teilnehmenden sollten \u00fcber die Nutzung der Daten umfassend und verst\u00e4ndlich aufgekl\u00e4rt werden. Dies heisst, es sollten sich Infos dar\u00fcber finden wer auf die Daten zugreifen kann, wo und wie lange die Daten gespeichert werden (DGSVO) und wie lange die Teilnehmenden die L\u00f6schung ihrer Daten oder deren Nichtverwendung beantragen k\u00f6nnen \u2013 denn sobald Daten anonymisiert wurden ist das meist schwierig. Auch sollten die Freiwilligkeit der Teilnahme und der zu jedem Zeitpunkt m\u00f6gliche Abbruch des Tests seitens der Proband*innen erw\u00e4hnt werden. Weiterhin sollten f\u00fcr eventuelle Fragen&nbsp;Kontaktm\u00f6glichkeiten angeboten werden.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><strong>Wiederholung der Aufkl\u00e4rung direkt vor dem Test.<\/strong>&nbsp;Bevor der Test beginnt, geht man am besten nochmals alle Punkte, die auch in der informierten Einwilligung zu finden sind, kurz mit den Proband*innen durch und stellt nochmals sicher, dass alles verstanden wurde und es diesbez\u00fcglich keine offenen Fragen mehr gibt. Empfehlenswert ist es, nochmals auf die Anonymisierung der Daten einzugehen und den Proband*innen zu erkl\u00e4ren, dass z.B. Zitate, welche in Reports oder Pr\u00e4sentationen auftauchen, nicht auf die jeweiligen Personen zur\u00fcckverfolgbar sind. Auch sollte man nochmals darauf hinweisen, dass&nbsp;die Proband*innen den Test absolut freiwillig durchf\u00fchren und das Recht haben, den Test jederzeit abzubrechen. Somit sind&nbsp;die Proband*innen in der Kontrolle, wenn sie sich aus welchem Grund auch immer z.B. anfangen unwohl zu f\u00fchlen.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><strong>Warm-up Fragen\/Pre-Test Interview.&nbsp;<\/strong>Vor dem eigentlichen Test, bei dem wir mit der Bearbeitung der Aufgaben loslegen, ist es gut, wenn wir zuerst mit thematisch passenden allgemeinen Warm-up Fragen starten. Diese Fragen sind meistens sowieso von Interesse und eher offener Natur, wie z.B. Fragen \u00fcber bisherige Nutzung des betreffenden Produktes \/Services, Fragen zur H\u00e4ufigkeit der Nutzung, Fragen zu konkreten Erlebnissen&nbsp;von der letzten Nutzung&nbsp;etc. Diese Konversation (Pre-Test Interview)&nbsp;hilft den Proband*innen weiter etwas \u201cherunterzufahren\u201d, etwas zu entspannen und sich mit der Umgebung und den Moderator*innen vertraut zu machen.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><strong>Non-verbale Cues und Mimik kontrollieren.<\/strong>&nbsp;W\u00e4hrend&nbsp; wir mit den Proband*innen zusammen sitzen, sollten wir&nbsp;uns niemals ungeduldig verhalten und auch implizite, unbewusste Verhaltensmuster auf dem Schirm haben \u2013 wie z.B unsere Mimik. Das ist leichter gesagt als getan, denn vieles passiert einfach unbewusst. Daher ist es eine gute Idee, dies mit in das Moderationsskript aufzunehmen bzw. das Thema auf dem Schirm zu haben. Eine&nbsp;im falschen Moment hochgezogene Augenbraue, ein zu lautes Atmen oder nerv\u00f6ses Fingertippeln kann v\u00f6llig missinterpretiert werden und seitens der Proband*in auf sich selbst bzw. die Leistung bezogen werden \u2013 mit Auswirkungen auf den Test.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><strong>Zeit der Teilnehmenden respektieren<\/strong>. Es ist ein Zeichen von H\u00f6flichkeit, wenn wir die Zeit&nbsp; unserer Teilnehme*innen respektieren: Das bedeutet f\u00fcr uns, gut vorbereitet zu sein und zeitlich nicht zu \u00fcberziehen. Hier kommt auch die besondere Rolle des sogenannten Pilottests ins Spiel: Der Pilottest dient dazu, unseren Test zu testen :)\u2013 der Test des Tests sozusagen. Der Pilot ist sehr hilfreich, um herauszufinden, ob unsere Aufgaben f\u00fcr Verwirrung bzw. Unklarheiten sorgen oder Fehler beinhalten und ob die&nbsp;Testbedingungen insgesamt \u201csmooth\u201d laufen. Der Pilottest&nbsp; l\u00e4uft genau wie ein richtiger Test ab, inklusive Proband*in, Einwilligung, Skript etc\u2026und&nbsp; findet einige Tage vor dem ersten richtigen Test statt. Somit haben wir noch genug Zeit eventuelle Korrekturen einzupflegen oder Aufgaben verst\u00e4ndlicher zu formulieren.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><strong>Nach dem Test: Datenverwendung nochmals best\u00e4tigen lassen<\/strong>. Am Ende der Test Session sollten die Moderator*innen nochmals sicherstellen\/abfragen, ob der\/die Proband*in mit der Verwendung der Daten einverstanden ist. Es kann sein, dass die Proband*innen sich das&nbsp;w\u00e4hrend der Teilnahme anders \u00fcberlegen. Ein sp\u00e4terer R\u00fccktritt davon ist, wie bereits erw\u00e4hnt, meist wegen der Anonymisierung der Datens\u00e4tze schwierig bis nicht m\u00f6glich. Dies sollte deutlich kommuniziert werden.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><strong>Bei Remote Tests: Technik-Setups am Vortag anbieten<\/strong>. Bei moderierten Remote Test Sessions ist es sinnvoll, Technik Setups z.B einen Tag vorher&nbsp;anzubieten. Hier besteht die M\u00f6glichkeit sich mit der Technik&nbsp;wie z.B Screensharing mithilfe einer Testseite (nicht dem Testprodukt an sich!) vertraut zu machen. Positiver Nebeneffekt:&nbsp; Die Proband*innen lernen das Testteam schon mal kennen, das hemmt die Aufregung am Teststag sowie&nbsp;eventuelle Ber\u00fchrungs\u00e4ngste.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li><strong>Transparente Kommunikation \u00fcber weitere Beobachter*innen<\/strong>. Manchmal wollen und sollten (!)&nbsp;auch Manager*innen oder Entwickler*innen bei den Tests zusehen k\u00f6nnen. So erleben Mitglieder des Teams die Probleme hautnah mit, welche die Nutzer*innen bei der Bedienung des betreffenden Systems erleben und dies kann wichtig sein, um ein Verst\u00e4ndnis f\u00fcr UX in Unternehmen zu etablieren und dar\u00fcber den&nbsp;<a href=\"https:\/\/birdux.studio\/ux-maturity-models\/\">UX Reifegrad eines Unternehmens zu steigern.<\/a>&nbsp;Auf der anderen Seite kann es problematisch werden, wenn&nbsp;<em>zu viele&nbsp;<\/em>Personen gleichzeitig den Test beobachten, denn dies bringt eine weitere k\u00fcnstliche Dimension mit in den Test indem Nutzer*innen&nbsp;sich noch mehr \u201ebeobachtet\u201c und \u201cgetestet\u201d f\u00fchlen. Somit k\u00f6nnen Leistungsdruck und die \u201cPerformance Angst\u201c steigen, was wiederum die Testergebnisse verf\u00e4lschen k\u00f6nnte. Also lieber weniger Beobachter und lieber das Team pro Test oder Testreihe rotieren, statt das&nbsp;komplette Team in den&nbsp;Beobachtungsraum zu stellen.<\/li>\n<!-- \/wp:list-item --><\/ol>\n<!-- \/wp:list -->\n\n<!-- wp:paragraph -->\n<p><strong>Falls zus\u00e4tzlich zu den Moderator*innen noch weitere Personen den Test beobachten<\/strong>\u2026<\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:list -->\n<ul><!-- wp:list-item -->\n<li>\u2026 sollte auf&nbsp;jeden Fall&nbsp;transparent darauf hingewiesen werden und&nbsp;es ist sinnvoll, dass diese&nbsp;Personen kurz bei der Begr\u00fc\u00dfung dabei sind. Es sollte immer offen und ehrlich kommuniziert werden, wer warum&nbsp;zuschaut.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li>\u2026.m\u00fcssen wir sie unbedingt gut briefen, wie sie sich vor, w\u00e4hrend und nach dem Test zu verhalten haben. Es geht darum, dass keine Unterbrechung&nbsp;durch Zwischenfragen oder Bemerkungen erfolgt oder wie oben bereits erw\u00e4hnt unbewusste Gestik, Mimik oder Ger\u00e4usche vernehmbar sind (Schnauben, G\u00e4hnen, Lachen, Fingertippeln). Wir erz\u00e4hlen gerne&nbsp; die oben genannte Geschichte von Jared Spool, da sie eindr\u00fccklich demonstriert wie schnell es unabsichtlich falsch laufen kann.<\/li>\n<!-- \/wp:list-item -->\n\n<!-- wp:list-item -->\n<li>\u2026ist es hilfreich, den Beobachter*innen z.B. einige Sticky Notes auszuh\u00e4ndigen um Unterbrechungen in Form von Fragen der Beobachter*innen zu vermeiden. So kann man das Gef\u00fchl der \u201cdr\u00e4ngenden\u201d Frage, die jetzt sofort gestellt werden muss, entkr\u00e4ftigen. Hier haben Beobachter*innen die M\u00f6glichkeit, ohne Unterbrechung des Tests ihre Fragen oder Gedanken direkt aufzuschreiben. Diese k\u00f6nnen sie sie uns&nbsp; Moderator*innen dann&nbsp;am Ende des Tests \u00fcberreichen. Wir sichten diese kurz und geben diese Fragen ggf dann an den\/die Proband*in weiter. Auch dies sollte zeitlich eingeplant werden. Durch dieses Vorgehen bleiben&nbsp;die Moderator*innen Hauptansprechpartner f\u00fcr die Testperson und es gibt keine Unruhe und&nbsp; Durcheinander.<\/li>\n<!-- \/wp:list-item --><\/ul>\n<!-- \/wp:list -->\n\n<!-- wp:heading -->\n<h2>Fazit: Macht \u201eVersuchspersonenstunden\u201c!<\/h2>\n<!-- \/wp:heading -->\n\n<!-- wp:paragraph -->\n<p>Es gibt sicher noch sehr viel mehr zu sagen, dennoch sollten diese grundlegenden Punkte erst einmal ausreichen. Wir k\u00f6nnen nur allen Designer*innen, Produktmanager*innen und Entwickler*innen empfehlen, \u00e4hnlich wie Psychologiestudierende auch \u201eVersuchspersonenstunden\u201c&nbsp;zu absolvieren und \u00f6fter selbst in die Rolle der Probanden zu schl\u00fcpfen und einen Usability Test aus dieser Perspektive mitzumachen. So bekommt man ein Gesp\u00fcr, wie sich das alles anf\u00fchlt und kann diese Erfahrung in die Gestaltung eines eigenen Tests mit einbringen.<\/p>\n<!-- \/wp:paragraph -->\n\n<!-- wp:paragraph -->\n<p><strong>Illustration:<\/strong>&nbsp;<a href=\"https:\/\/storyset.com\/question\" target=\"_blank\" rel=\"noreferrer noopener\">Question illustrations by Storyset<\/a><\/p>\n<!-- \/wp:paragraph -->","_et_gb_content_width":"","footnotes":""},"categories":[45],"tags":[71],"class_list":["post-13110","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-user-research-evaluation","tag-usability-testing"],"_links":{"self":[{"href":"https:\/\/birdux.studio\/en\/wp-json\/wp\/v2\/posts\/13110","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/birdux.studio\/en\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/birdux.studio\/en\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/birdux.studio\/en\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/birdux.studio\/en\/wp-json\/wp\/v2\/comments?post=13110"}],"version-history":[{"count":0,"href":"https:\/\/birdux.studio\/en\/wp-json\/wp\/v2\/posts\/13110\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/birdux.studio\/en\/wp-json\/wp\/v2\/media\/14441"}],"wp:attachment":[{"href":"https:\/\/birdux.studio\/en\/wp-json\/wp\/v2\/media?parent=13110"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/birdux.studio\/en\/wp-json\/wp\/v2\/categories?post=13110"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/birdux.studio\/en\/wp-json\/wp\/v2\/tags?post=13110"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}