Reihenfolgeeffekte

Reihenfolgeeffekte treten auf, wenn die Abfolge von Aufgaben oder Bedingungen die Ergebnisse beeinflusst. Wenn Teilnehmer*innen immer Design A vor Design B testen, lässt sich nicht feststellen, ob B besser abgeschnitten hat, weil es tatsächlich besser ist, oder weil die Teilnehmer*innen bis dahin mehr Übung hatten.

Arten von Reihenfolgeeffekten

• Übungseffekte: Teilnehmer*innen werden mit jeder Wiederholung besser in der Aufgabe. Die zweite Bedingung profitiert von erlernten Fähigkeiten, unabhängig davon, welches Design es ist
• Ermüdungseffekte: Teilnehmer*innen werden im Laufe der Zeit müde, gelangweilt oder weniger sorgfältig. Spätere Bedingungen leiden unter verringerter Aufmerksamkeit und Motivation
• Übertragungseffekte: Die Exposition gegenüber der ersten Bedingung verändert, wie Teilnehmer*innen die zweite wahrnehmen oder mit ihr interagieren. Wenn Sie zuerst eine überladene Oberfläche testen, wirkt eine aufgeräumte im Kontrast besser
• Sensibilisierung: Das Testen der ersten Bedingung macht Teilnehmer*innen bewusst, was Sie messen, und verändert ihren Zugang zu nachfolgenden Bedingungen

Warum es wichtig ist

Reihenfolgeeffekte sind besonders gefährlich, weil sie sich als echte Unterschiede zwischen Bedingungen tarnen. Ihre Daten werden ein statistisch signifikantes Ergebnis zeigen, und das Ergebnis ist real, aber es misst den Effekt der Reihenfolge, nicht des Designs.

Die Lösung

Counterbalancing ist die Standardlösung: Variieren Sie die Reihenfolge über die Teilnehmer*innen hinweg, sodass jede Bedingung gleich häufig an jeder Position erscheint. Dies eliminiert Reihenfolgeeffekte nicht, ermöglicht es aber, sie in der Analyse zu messen und zu kontrollieren.