This post is also available in:
Deutsch
Interviewerbias, also die Verzerrung von Umfrageergebnissen durch den Interviewer, ist ein Problem in der Marktforschung und bei Evaluationen und Bewertungen aller Art. In der Marktforschung werden durch professionelle Schulung der Interviewer und repräsentative Samples diese Einflüsse vermindert. Zudem hängt die berufliche Existenz der Marktforscher von guten Ergebnissen der Forschung undn nicht von tendenziellen Einträgen im Fragebogen ab. Bei Evaluationen kann die Weiterbeschäftigung des Bewerteten von guten Bewertungen abhängig gemacht werden.
Was machen die Marktforscher besser
Interviewer werden vor dem Einsatz gebrieft. Sie erhalten eine Einführung in den Fragebogen und eine detaillierte Angaben, wie die Qualität und Repräsentativität der Studie sicher gestellt werden kann. Interviewer dürfen die Befragten nicht beeinflussen, aber Fragen erklären. Dazu müssen sie selbst die Fragen beherrschen und umformulieren können.
Einfluss der Gruppenmeinung
Erhält eine Gruppe Fragebögen, um diese zusammen auszufüllen, wird die Meinung der Meinungsführer der Gruppe häufiger auftauchen. Viele Befragte trauen sich dann nicht, ihre eventuell abweichende Meinung aufzuschreiben, oder schwimmen einfach gerne mit der Gruppe.
Beispiel Seminarauswertung: Unzureichende und unverständliche Fragestellung verzerrt die Angaben
Zwei Fehler werden dabei sehr häufig gemacht:
1. Der Fragebogen enthält zu wenig sinnvolle und situationsangepaßte Fragen. So wird in z. B. einem Bogen für 17-jährige Berufsfachschüler nach „Anwendbarkeit des Wissens in der betrieblichen Praxis“ gefragt. Teilweise werden populäre Begriffe wie „strukturiert“ verwendet, die eine starke persönliche Interpretation sowohl des Auswerters als auch des Befragten zulassen. Fragen nach der „fachlichen Kompetenz des Dozenten“ sind meiner Meinung nach nicht exakt. Bei einem betrieblichen Seminar mag die Frage im Sinne, ob sich der Dozent mit den bearbeiteten Prozessen auskennt, zulässig sein. Es wird nicht ausreichend differenziert untersucht, wo der Dozent kompetent oder nicht kompetent ist. Ist er ein genialer Pädagoge, der den Lernprozess der Teilnehmer perfekt unterstützt? Ein
guter Verkäufer, der seinen Teilnehmern ein gutes Gefühl vermittelt, auf ihre Bedürfnisse perfekt eingegangen ist, aber nur kleine inhaltliche Fortschritte machte?
Beispiel Seminarauswertung: Anwesenheit des Dozenten beeinflusst die Eintragungen
2. Der Dozent beeinflußt die Teilnehmer beim Auswerten der Bögen. Die Teilnehmer empfinden das Ausfüllen der Seminarauswertung/dem Feedbackbogen als Beifallsbekundung für den Seminarleiter, und entsprechend positiv fallen die Bewertungen aus. Damit keiner auf falsche Ideen kommt, bleibt der Seminarleiter/Dozent während des Ausfüllens im Raum, und nimmt die ausgefüllten Bögen persönlich entgegen. Das ist Interviewerbias extrem.
Richtig wäre, dass der Dozent den Raum während des Ausfüllens verläßt oder die Beurteilung von zu Hause oder dem Büro aus über das Internet erfolgt. Zuvor erklärt er oder sie den Teilnehmern den Zweck der Umfrage: ein reales Bild vom Seminarablauf aus Teilnehmersicht, keine Dankeshymne an den Dozenten. Die Teilnehmer geben die Fragebögen unbeobachtet und anonym ab, so dass sie ihre Eindrücke unbefangen wiedergeben können. Noch exaktere Ergebnisse enstehen mit einer zusätzlichen Nachbefragung nach ein bis zwei Monaten.
Diese Vorgehensweise stellt zusätzliche Anforderungen an den Schulungsanbieter: nicht unbedingt bringt der Dozent mit den besten Beurteilungen die besten Leistungen, zudem wird es je nach Teilnehmerstruktur Rachebewertungen geben.
Beispiel für einen Fragebogen zur Seminarauswertung
Dieser Fragebogen wurde mit der Software Limesurvey erstellt und kann sowohl mit Papier als auch online verwendet werden, so das Original zur Verfügung steht. Im Zweifelsfall einfach mich fragen.
Ein Beispiel für einen einfachen, aber doch aussagekräftigen Fragebogen für Unterricht ist hier. Kostenlose Anmeldung ist erforderlich.
