Meet the Experts

Best-Practice-Methoden in der Umfrageforschung

Im Rahmen der jeweils einstündigen Online-Reihe “Meet the Experts” erhalten Sie in den kommenden Wochen einen Überblick über unterschiedliche Verfahren und Best-Practice-Methoden der Umfrageforschung, die Sie darin unterstützen sollen, die bestmögliche Datenqualität zu erreichen. Nach einem Impulsvortrag stehen Ihnen unsere umfragemethodischen Expert*innen jeweils für Fragen und Diskussion zur Verfügung.

Hinweise zum Ablauf und zur Anmeldung: 

Die Online-Reihe wird über Zoom stattfinden. Sie werden jeweils einen Link mit Passwort erhalten. Ihre Kontaktdaten werden wir nach der Veranstaltung/den Veranstaltungen, zu denen Sie sich angemeldet haben, löschen. Informationen zum Datenschutz bei GESIS finden Sie auf unserer Datenschutzseite.

Die Anmeldung wird gestaffelt möglich sein, für Vorträge im November und Dezember ab 6.11. Für Vorträge im Januar und Februar ab Mitte Dezember, für Vorträge im März ab Februar und für Vorträge im April und Mai ab März. Wenn Sie über die "Meet the Expert"-Vorträge und die jeweiligen Anmeldedaten oder generell über Neues aus GESIS auf dem Laufenden bleiben möchten, dann können Sie sich hier zu unserem monatlichen Newsletter gesis report anmelden.

Foliensatz der Vorträge & weiterführende Informationen:

Sie finden die Foliensätze nach einem Vortrag unter dem jeweiligen Vortrag. Des Weiteren informieren die GESIS Survey Guidelines über viele Aspekte, die bei der Organisation und Durchführung von Umfragen zu berücksichtigen sind und die auch hier im Rahmen der Reihe vorgetragen werden. Für individuelle Beratungen zu wissenschaftlichen Forschungsprojekten können Sie uns auch individuell kontaktieren. Hier kommen Sie zu weiteren Informationen.

*** Der Vortrag "Übersetzung von Fragebögen: Fragebogenentwicklung, Übersetzungsprozesse & Management" ist ausgebucht, aber Sie können uns unter meetexperts(at)gesis(dot)org  eine Mail schicken, sodass wir Sie auf die Warteliste setzen.*** 

 

 

Anmeldung für Vorträge ab Januar '21 folgt.

Die Folien des Vortrags erhalten Sie hier (1,00 MB).

Inhalt:

Häufig wird in (wissenschaftlichen) Publikationen darauf verwiesen, dass die Ergebnisse einer Erhebung auf einer „repräsentativen“ Stichprobe basieren. Problematisch an dieser Aussage ist jedoch, dass es „Repräsentativität“ als Gütekriterium im mathematisch/statistischen Sinn nicht gibt. Die Beurteilung einer Erhebung erfolgt hier vielmehr über die verwendete Stichprobenstrategie sowie die Erwartungstreue und Effizienz eines Schätzers.  

Ziel dieses Vortrags ist es daher, ein besseres Verständnis für die Verwendung gängiger Stichprobenstrategien zu vermitteln. Dafür werden sowohl einfache als auch komplexe (mehrstufige) Ziehungsverfahren erläutert. Ein weiterer Fokus liegt gerade bei komplexen Stichprobenziehungen mit ungleichen Auswahlwahrscheinlichkeiten in der korrekten Berücksichtigung des Sample Designs im Zuge der Schätzung. Dies geschieht durch die Verwendung von Designgewichten. Sowohl Stichprobenstrategien als auch die Anwendung von Designgewichten werden anhand einfacher Beispiele erläutert. 

Vortragende:

Dr. Matthias Sand ist Senior Researcher bei GESIS – Leibniz-Instituts für Sozialwissenschaften, im Team Survey Statistics. In seiner Forschung und Beratung widmet er sich Fragestellungen aus dem Bereich der komplexen Stichprobenziehung, der Gewichtung von Erhebungsdaten sowie der Imputation fehlender Werte. Er promovierte an der TU Dresden zum Thema der Gewichtung von Erhebungsdaten, basierend auf mehreren Auswahlgrundlagen am Beispiel telefonischer Befragungen. 

Dr. Christian Bruch ist Senior Researcher bei GESIS – Leibniz-Institut für Sozialwissenschaften, im Team Survey Statistics. Seine Forschung bezieht sich auf Gewichtungsverfahren, Varianzschätzung und Imputation. Er hat seine Dissertation zum Thema Varianzschätzung unter Imputation und bei komplexen Stichprobendesigns geschrieben. 

 

Die Folien des Vortrags erhalten Sie hier (1,04 MB).

Inhalt:

Der Vortrag behandelt den Umgang mit Schätzungen, die auf Daten mit fehlenden Werten basieren, und deckt sowohl den Umgang mit Unit als auch Item Nonresponse ab. In diesem Zusammenhang wird ein Überblick über Gewichtungsverfahren gegeben, die in der Praxis häufig zur Kompensation fehlender Werte eingesetzt werden. Im Einzelnen werden die Gewichtungsmethoden Raking, Poststratifizierung und lineare Verfahren, wie der General Regression Estimator, vorgestellt. Des Weiteren wird der Vortrag eine kurze Einführung zu Verfahren der Imputation geben. Auch diese Verfahren werden zur Kompensation fehlender Werte eingesetzt, bilden zusätzlich aber auch die Grundlage zur Durchführung der Gewichtungsmethoden. Der Vortrag wird daher Verfahren der einfachen und multiplen Imputation beinhalten. 

Vortragende:

Dr. Christian Bruch ist Senior Researcher bei GESIS – Leibniz-Institut für Sozialwissenschaften, im Team Survey Statistics. Seine Forschung bezieht sich auf Gewichtungsverfahren, Varianzschätzung und Imputation. Er hat seine Dissertation zum Thema Varianzschätzung unter Imputation und bei komplexen Stichprobendesigns geschrieben. 

Dr. Matthias Sand ist Senior Researcher bei GESIS – Leibniz-Instituts für Sozialwissenschaften, im Team Survey Statistics. In seiner Forschung und Beratung widmet er sich Fragestellungen aus dem Bereich der komplexen Stichprobenziehung, der Gewichtung von Erhebungsdaten sowie der Imputation fehlender Werte. Er promovierte an der TU Dresden zum Thema der Gewichtung von Erhebungsdaten, basierend auf mehreren Auswahlgrundlagen am Beispiel telefonischer Befragungen. 

***19.11.2020: Der Vortrag ist ausgebucht.***

ics-Kalendereintrag (45 kB)

Inhalt:

Eine gute Fragebogenübersetzung ist unabdingbar für ein gelingendes internationales oder interkulturelles Forschungsprojekt. Es reicht jedoch nicht, das Übersetzungsthema erst nach der Entwicklung eines Ausgangsinstruments in den Fokus zu nehmen. Vielmehr sollte Übersetzung bereits bei der Entwicklung eines Fragebogens eine Rolle spielen. Im ersten Teil dieses Vortrags geht es somit darum, wie Übersetzbarkeit und kulturelle Relevanz bereits während der eigentlichen Fragebogenentwicklung berücksichtigt werden können (z.B. durch interkulturelle Teams, Verfahren zur Überprüfung der Übersetzbarkeit oder fragespezifische Übersetzungsrichtlinien). Im zweiten Teil des Vortrags werden Best-Practice-Methoden vorgestellt, insbesondere der Team-Ansatz bzw. die TRAPD-Übersetzungsmethodik. Im dritten Teil werden Management-Aspekte beleuchtet, die als Auftraggeber bzw. Projektleiter zu berücksichtigen sind. Hierzu zählen z.B. zeitliche Planung oder Briefing der Übersetzer. 

Vortragende:

Dr. Dorothée Behr ist Teamleiterin des Teams Cross-Cultural Survey Methods in der Abteilung Survey Design and Methodology (SDM). Ihre Forschung und Beratung fokussiert auf verschiedenen Aspekten der Fragebogenübersetzung sowie auf interkulturellem Web-Probing zur Überprüfung von Vergleichbarkeit in Umfragedaten. Sie entwickelte u.a. federführend die Übersetzungsrichtlinien für den Hintergrundfragebogen in PIAAC in Zyklus 1 und 2, war in die Entwicklung des Übersetzungstools im EVS 2017 eingebunden und ist Mitglied des Translation Expert Panels im ESS. 2009 promovierte sie an der Universität Mainz zur Methodik in der Fragebogenübersetzung.   

ics-Kalendereintrag (44 kB)

Inhalt:

Um zu gewährleisten, dass die mittels eines Fragebogens erhobenen Informationen eine hohe Datenqualität aufweisen, muss sichergestellt werden, dass alle Befragten die enthaltenen Fragen verstehen, nur solche Informationen abgefragt werden, die Befragte tatsächlich haben und auch abrufen können, und dass die Fragen im intendierten Sinn des Forschers verstanden werden. Die Ermittlung und Behebung solcher Probleme sind die zentralen Ziele von kognitiven Interviews. Dieser Vortrag vermittelt die grundsätzliche Bedeutung und Relevanz von kognitiven Interviews im Rahmen von Umfrageprojekten. Der Sinn und Zweck kognitiver Interviews wird anhand von Beispielen ungetesteter Fragen und auf Basis von Pretests überarbeiteter Fragen verdeutlicht. Des Weiteren werden die wichtigsten kognitiven Techniken kurz vorgestellt (z.B. Think Aloud, Probing) und Ratschläge zur praktischen Durchführung von Pretests gegeben. Abschließend werden die Angebote vorgestellt, die GESIS im Bereich kognitiver Pretests zur Verfügung stellt. 

Vortragender:

Dr. Timo Lenzner ist Senior Researcher im Bereich Kognitives Pretesting bei GESIS – Leibniz-Institut für Sozialwissenschaften. Seine Schwerpunkte liegen in der Beratung und Durchführung von kognitiven Pretests und in der Forschung zum Design und der Evaluation von Fragebögen.

ics-Kalendereintrag (46 kB)

Inhalt:

Angesichts einer nahezu flächendeckenden Verfügbarkeit eines Internetzugangs und geringer Erhebungskosten stellen Online-Befragungen eine sehr attraktive Möglichkeit der Datenerhebung dar. Jedoch mangelt es an einem geeigneten Ziehungsrahmen für bevölkerungsrepräsentative Online-Umfragen – und längst nicht jede Zielperson ist willens oder in der Lage, an einer Online-Befragung teilzunehmen. Daher bietet sich eine Kombination der beiden selbstadministrierten Modi online und schriftlich/postalisch an. Auf diese Weise können die Zielpersonen auf der Basis von Registerstichproben postalisch rekrutiert und zur Teilnahme an der Umfrage eingeladen werden. An dieser können sie sich dann entweder online oder mit einem Papierfragebogen beteiligen. Die Kombination der beiden selbstadministrierten Erhebungsmodi erscheint zudem vor dem Hintergrund des gegenwärtigen Gebots der sozialen Distanzierung besonders attraktiv.  

Im Rahmen des Vortrags werden die vielfältigen Potenziale selbstadministrierter Mixed-Mode-Befragungen diskutiert und anhand von empirischer Evidenz bewertet. Dabei wird insbesondere auf den Rücklauf, die Zusammensetzung der realisierten Stichprobe und die Erhebungskosten eingegangen. Auf der Grundlage einer kürzlich von GESIS durchgeführten Studie wird zudem dargelegt, wie sich unkonditionale Incentives und die Reihenfolge des Modusangebots auf den Rücklauf, die Stichprobenzusammensetzung und die Erhebungskosten auswirken. Auf diese Weise können Empfehlungen für die Durchführung selbstadministrierter Mixed-Mode-Befragungen vorgeschlagen und diskutiert werden. 

Vortragende:

Dr. Sven Stadtmüller arbeitet seit 2015 bei GESIS – Leibniz-Institut für Sozialwissenschaften in der Abteilung Survey Design and Methodolody im Team Survey Operations. Seine Forschungsschwerpunkte sind die Rekrutierung von Zielpersonen für wissenschaftliche Umfragen sowie Mixed-Mode-Befragungen, insbesondere Befragungen mit der Kombination der beiden Modi online und schriftlich/postalisch. 

Dr. Henning Silber ist Leiter des Teams Survey Operations und arbeitet seit 2015 bei GESIS – Leibniz-Institut für Sozialwissenschaften in der Abteilung für Survey Design and Methodology. Seine Forschungsschwerpunkte umfassen die Bereiche Online- und Panelbefragungen, Umfrageimplementierung, experimentelle Untersuchungsdesigns und politische Soziologie.

ics-Kalendereintrag (44 kB)

Inhalt:

Verschiedene Umfragen wenden zur Messung der gleichen Konzepte oft unterschiedliche Fragen und Antwortformate an. Wenn Daten aus verschiedenen Umfragen verglichen oder kombiniert werden sollen, führt das zu Vergleichbarkeitsproblemen. Instrumente, die latente Konstrukte (wie Einstellungen, Werte oder Persönlichkeit) messen, sind hier besonders herausfordernd. Je nach Frageformulierung und Antwortskala können die gleichen Zahlenwerte eine völlig unterschiedliche Intensität des Konstrukts bedeuten. Eine effiziente und valide Möglichkeit dieses Problem zu beheben ist das sogenannte Test Equating aus der Psychometrie. Das vorgestellte Equating-Verfahren lässt sich sowohl auf Einzelfragen wie auch Mehr-Item-Skalen anwenden. Zudem lässt es sich größtenteils automatisieren, was gerade bei größeren Projekten und Variablenmengen wichtig ist. Vorgestellt werden die Grundidee, ein empirisches Beispiel und ein Beispiel effizienter Automatisierung. 

Vortragender:

Dr. Ranjit K. Singh ist ein Postdoc in der Abteilung Survey Design and Methodology bei GESIS. Er praktiziert, erforscht und berät zur ex-post Harmonisierung von Umfrageinstrumenten und -daten. Weitere Forschungsinteressen sind die Qualität von Umfrageinstrumenten sowie Selbstkontrolle.

ics-Kalendereintrag (47 kB)

Inhalt: 

Die Qualität der Erhebungsinstrumente eines Surveys hat einen maßgeblichen Einfluss auf die Belastbarkeit der empirischen Schlüsse, die auf Basis der erhobenen Daten gezogen werden. Da Fehler bei der Fragebogenkonstruktion nach Erhebung der Daten in der Regel nicht mehr behoben werden können, sollte die Entwicklung des Fragebogens mit großer Sorgfalt und ausreichend Zeit erfolgen. In diesem Vortrag erhalten die Teilnehmer*innen einen kurzen Überblick über die wichtigsten Aspekte, die bei der Konstruktion des Fragebogens und der Entwicklung von Fragen beachtet werden sollten, die aber typischerweise immer wieder übersehen werden. Dies beginnt bereits bei der Umsetzung der Forschungsfragen in einem Erhebungsinstrument. Häufig ist letzteres viel zu umfangreich und es ist bereits abzusehen, dass man viele Fragen überhaupt nicht auswerten wird. Dann sollte man aber unbedingt Kürzungen vornehmen, die die Befragten deutlich entlasten können und somit zur Motivation beitragen. Weiterhin wird anhand von ausgewählten Beispielen erläutert, wie man Fehler bei der Formulierung der Fragen und Antwortkategorien vermeiden kann. Darüber hinaus bietet dieser Vortrag einen kurzen Überblick über die GESIS-Angebote zur Unterstützung von Wissenschaftlerinnen und Wissenschaftlern bei der Fragebogenentwicklung.  

Vortragende:

Prof. Dr. Michael Braun ist Projektberater bei GESIS – Leibniz Institut für Sozialwissenschaften. Vor seiner Tätigkeit bei GESIS arbeitete er als wissenschaftlicher Mitarbeiter am Institut für Soziologie der Universität München. 1988-1989 hatte er eine Gastprofessur am Department of Sociology der University of Chicago inne. Er hat im Jahr 1985 an der Universität München im Fach Soziologie promoviert und im Jahre 2004 an der Universität Mannheim im Fach Empirische Sozialforschung habilitiert. Seit 2007 ist er apl. Professor an der Universität Mannheim. 

Dr. Jette Schröder ist Projektberaterin bei GESIS – Leibniz Institut für Sozialwissenschaften. Seit November 2015 ist sie außerdem Geschäftsführerin der Arbeitsgemeinschaft Sozialwissenschaftlicher Institute e. V. (ASI) und seit Juni 2016 stellvertretende Vorsitzende des Rats der Deutschen Markt- und Sozialforschung e. V.. Vor ihrer Tätigkeit bei GESIS arbeitete sie als methodische Koordinatorin im Beziehungs- und Familienpanel pairfam und war Mitarbeiterin am Lehrstuhl für Statistik und sozialwissenschaftliche Methodenlehre an der Universität Mannheim. Sie hat im Jahr 2009 an der Universität Mannheim im Fach Sozialwissenschaften promoviert. 

Inhalt:

Folgt in Kürze

Vortragende:

Folgt in Kürze

Inhalt:

Folgt in Kürze

Vortragende:

Folgt in Kürze:

 

Inhalt:

Kognitive Pretests werden in der Umfrageforschung eingesetzt, um die Verständlichkeit eines Fragebogens oder einzelner Items zu überprüfen. Neben klassischen face-to-face Interviews ermöglicht die Methode des Web Probings die Durchführung eines Pretests im Rahmen einer Online-Befragung. Dazu werden klassische kognitive Nachfragetechniken in eine Online-Befragung implementiert. Ziel dieses Vortrags ist es, die Methode des Web Probings in Abgrenzung zu kognitiven Interviews vorzustellen und die Vorzüge und Schwächen der jeweiligen Methode darzulegen. Daneben fokussiert der Vortrag auf praktische Aspekte zur Durchführung von Online-Pretests, die sich aus der Übertragung in den Online-Modus ergeben.   

Vortragende:

Dr. Cornelia Neuert ist Leiterin des Teams Questionnaire Design & Evaluation in der Abteilung Survey Design & Methodology (SDM). Ihre Forschungsinteressen liegen im Bereich Questionnaire Design, Response Behavior und in der Bewertung und Weiterentwicklung kognitiver Pretestverfahren. 

Inhalt:

Folgt in Kürze

Vortragende:

Folgt in Kürze

 

Inhalt:

Folgt in Kürze

Vortragende:

Folgt in Kürze

Inhalt:

Folgt in Kürze

Vortragende:

Folgt in Kürze