How to weight survey data with a dyadic multi-actor design?
Autor/in:
Pasteels, Inge
Quelle: Survey Methods: Insights from the Field, (2015) , 11 S
Inhalt: This paper deals with adjustment for nonresponse in dyadic multi-actor survey designs. It presents a multi-dimensional approach to
weighting that addresses the various analytical units represented in such data, so that sampling design weights are correctly accounted
for and so that consistency between weights is achieved. This approach is demonstrated by using the primary respondents in the Divorce
in Flanders study, which is a typical example of a dyadic multi-actor design. Five sets of weighting coefficients are made available
whereby different subsets of data, according to different analytical units, are selected: the subset of the dyads, the subset of men and
women respectively, and two subsets of marriages. Post-stratification – with the year of marriage, status of the reference marriage at the
sampling date and five-year divorce cohort as auxiliary variables – was chosen as the weighting adjustment technique.
Schlagwörter:Gewichtung; weighting; Antwortverhalten; response behavior; Stichprobe; sample; soziale Schichtung; social stratification; Analyseverfahren; analysis procedure; Zufallsauswahl; random sample; Umfrageforschung; survey research
SSOAR Kategorie:Erhebungstechniken und Analysetechniken der Sozialwissenschaften
The impact of method bias on the cross-cultural comparability in face-to-face surveys among ethnic minorities
Autor/in:
Kappelhof, Joost W. S.
Quelle: Methods, data, analyses : a journal for quantitative methods and survey methodology (mda), 8 (2014) 1, S 79-118
Inhalt: "This article investigates the impact of several sources of method bias on the cross-cultural comparison of attitudes towards gender roles and family ties among non-Western minority ethnic groups. In particular, it investigates how interviewer effects, the use of an interviewer with a shared ethnic background, interview language, interviewer gender, gender matching, the presence of others during the interview and differences in socio-demographic sample composition of non-Western minority ethnic groups affect the cross-cultural comparison of attitudes towards gender roles and family ties between these groups. The data used in this study come from a large scale face-to face survey conducted among the four largest non-Western minority ethnic groups in The Netherlands for which Statistics Netherlands drew a random sample of named individuals from each of the four largest non-Western minority populations living in The Netherlands. Furthermore, methods are introduced to estimate the potential impact of method bias on cross cultural comparisons. The results show that measurement of both gender roles and family ties constructs are full scalar invariant across the different ethnic groups, but that observed differences in attitudes between ethnic groups especially towards gender roles are influenced by method bias. This in turn leads to biased comparisons between ethnic groups because of differences in the size of the various sources of method bias, the differential impact of the same method bias between ethnic groups and the combination thereof." (author's abstract)
Schlagwörter:ethnische Gruppe; ethnic group; Minderheit; minority; Befragung; survey; Interview; interview; Geschlechtsrolle; gender role; Familie; family; Niederlande; Netherlands; soziale Integration; social integration; kulturelle Integration; cultural integration; interkultureller Vergleich; intercultural comparison; Forschungsreaktivität; reactivity effect; Antwortverhalten; response behavior; Umfrageforschung; survey research; methods bias; non-Western ethnic minorities; incomparability of samples; multi group Mimic
SSOAR Kategorie:Erhebungstechniken und Analysetechniken der Sozialwissenschaften
Quelle: Politics and Governance, 1 (2013) 2, S 132-137
Inhalt: In this brief analysis, we use a new dataset of two million voter registration records to demonstrate that gender, race, and age do not correlate with political participation in the ways that previous research has shown. Among Blacks and Latinos, women participate at vastly higher rates than men; many Blacks participate at higher rates than Whites; and the relationship between age and participation is both not linear and varies by race and gender. Survey research is unable to capture the true relationship between demographics and participation on account of survey bias and, more importantly, the non-linearity of effects. As a result, theories of participation, like the dominant resources-based models, have been built on faulty premises and tested with inadequate data. Our evidence calls for a renewed effort to understand election participation by utilizing large datasets, by being attentive to linearity assumptions, and by returning to theory.
Schlagwörter:Daten; data; USA; United States of America; Wahl; election; gender; Wähler; voter; Umfrageforschung; survey research; Rasse; race; Alter; old age; Wahlbeteiligung; voter turnout; Demographie; demography
SSOAR Kategorie:Erhebungstechniken und Analysetechniken der Sozialwissenschaften, politische Willensbildung, politische Soziologie, politische Kultur
Titelübersetzung:Social presence in online surveys
Autor/in:
Schmidt-Catran, Alexander W.; Hörstermann, Katharina
Quelle: Methoden, Daten, Analysen (mda), 7 (2013) 3, S 397-432
Inhalt: "Onlinebefragungen zählen mittlerweile zum Standardrepertoire vieler Forschungsinstitute, einige methodische Fragen bleiben bis dato jedoch noch unbeantwortet. Diese Studie beschäftigt sich mit der Frage, ob durch die Simulation sozialer Präsenz das Antwortverhalten der Befragten beeinflusst werden kann. Mit einem experimentellen Design werden Effekte der sozialen Präsenz auf Nonresponse sowie sozial erwünschtes Antwortverhalten untersucht. Dabei wird davon ausgegangen, dass die Implementierung sozialer Präsenz den Vorteil einer erhöhten Teilnahmebereitschaft und den Nachteil von sozial erwünschtem Antwortverhalten mit sich bringen kann. Der inhaltliche Schwerpunkt des Experiments liegt auf Einstellungen zu Sexismus, Geschlechterrollen und der Berufstätigkeit von Frauen. Zur Simulation der sozialen Präsenz werden Fotografien verwendet. Zusätzlich zum Effekt der sozialen Präsenz wird untersucht, ob das Geschlecht und die Attraktivität der auf den Fotos gezeigten Personen einen Einfluss auf das Antwortverhalten haben. Bei diesem Effekt handelt es sich um eine Art 'Gender-of-Interviewer'-Effekt. Bezüglich der Teilnahme- und Antwortbereitschaft konnten keine positiven Effekte nachgewiesen werden. Die Ergebnisse hinsichtlich möglicher Interviewereffekte in Form von sozial erwünschtem Antwortverhalten sind nicht eindeutig, es tauchen aber systematische Unterschiede zwischen den Experimental- und der Kontrollgruppe auf." (Autorenreferat)
Inhalt: "Today, online surveys belong to the standard instruments of most survey research institutes, but some methodical questions are still unanswered. This study deals with the question of whether the simulation of social presence has an effect on the response style. Using an experimental design, the effects of social presence on non-response and socially desirable answers are tested. We expect social presence to lower non-response but to induce socially desirable answers. Topics of the survey are attitudes towards sexism, gender roles and the participation of women in the labor market. Social presence is simulated by pictures of the 'investigators' of the study. In addition to the effect of social presence, the study investigates whether the gender and the attractiveness of the person on the pictures have an effect on the answers. This effect might be called a 'gender-of-interviewer'-effect. Concerning the non-response rate no positive effect of social presence could be found. The results with regard to social desirability and a possible gender-of-interviewer-effect are ambiguous but show significant differences between the control group and our experimental groups." (author's abstract)
Personalisation in advance letters does not always increase response rates: demographic correlates in a large scale experiment
Titelübersetzung:Personalisierung in Voraus-Briefen erhöhen nicht immer die Antwortraten: demographische Korrelationen in einem Großversuch
Autor/in:
Luiten, Annemieke
Quelle: Survey Research Methods, 5 (2011) 1, S 11-20
Inhalt: "This study was set up to examine whether personalizing advance letters by adding names and appropriate salutation, affects the survey cooperation of subgroups in the general population differently, in analogy to findings that subgroups react differently to advance letters. Differential reactions could be an explanation for the mixed findings in the literature on personalization of advance or cover letters. In a large scale study (N=39,518), information in communal registries was used to study (non)response patterns in subgroups, as a result of personalization. Advance letters of the Dutch CAPI Labor Force Survey were randomly assigned to addresses. In the non-personalized version (N=30,899), letters were addressed to 'the inhabitants of '. In the personalized version (N=8,619), the name or names of the household core were derived from municipal registries and used for addressing the letter. A re-interview addressed the issue whether the advance letter was read by more households when the household was addressed by name. By linking the sample to registries, it was possible to study response behavior of subgroups. The study focused on groups the literature indicates as differentially reacting to advance letters, i.e., different age, ethnic, gender, household composition and income groups, and groups with or without a listed telephone number. Hardly any difference in the overall level of cooperation was found if either a personalized or non-personalized letter was used. However, differential reactions were found for listed versus unlisted telephone owners, where only listed households reacted positively to personalization. In the other subgroups studied, no firm evidence of differential reactions were found. The paper discusses what these results signify for sample composition and the risk of bias." (author's abstract)
Welche Vorhersagekraft hat die individuelle Persönlichkeit für inhaltliche sozialwissenschaftliche Variablen?
Titelübersetzung:What power of prediction does the individual personality have for content-related social science variables?
Autor/in:
Rammstedt, Beatrice
Quelle: Zentrum für Umfragen, Methoden und Analysen -ZUMA-; Mannheim (ZUMA-Arbeitsbericht, 2007/01), 2007. 23 S
Inhalt: 'In der vorliegenden Studie wurde überprüft, in wie weit die individuelle Persönlichkeit in Form der fünf grundlegenden Persönlichkeitsdimensionen die Vorhersage inhaltlicher sozialwissenschaftlicher Variablen verbessern kann. Verbessern wurde in diesem Zusammenhang als eine zusätzliche Varianzerklärung zu der der klassischen soziodemographischen Variablen Alter, Geschlecht und Bildung verstanden. Als Datenbasis diente der kombinierte Datensatz des ALLBUS 2004 und des ISSP 2003/2004, deren zentrale Themenkomplexe als abhängige Variablen untersucht wurden. Die Ergebnisse zeigen, dass für sämtliche Themenkomplexe eine oder mehrere Persönlichkeitsvariablen deutlich zur Verbesserung der Vorhersage beitrugen. Welche Persönlichkeitsdimension die Vorhersage im einzelnen verbesserte sowie das Ausmaß dieser Verbesserung variierte stark zwischen den einzelnen Themenkomplexen. Es kann somit geschlussfolgert werden, dass die standardmäßige Erfassung der Persönlichkeit die prädiktive Validität sozialwissenschaftlicher Umfragen deutlich erhöhen könnte.' (Autorenreferat)
Inhalt: 'This study examines in how far the individual's personality, conceptualized as the five most basic dimensions of personality, can improve predicting content variables in the social sciences. Improvement here is defined as additional variance that can be explained in addition to the standard socio-demographic variables age, gender, and education. The ALLBUS 2004 and the ISSP 2003/2004, whose central module topics were investigated as dependent variables, were combined to serve as data basis. Results show that, for all topics, one or more personality variables could significantly improve the prediction. Which dimension of personality leads to the improvement and the amount of variance explained by personality vary greatly between topics. It can be concluded that routinely assessing personality has the potential to significantly increase the predictive validity in social science survey research.' (author's abstract)|
Schlagwörter:prognosis; Individuum; social indicators; variability; social science; Prognose; Sozialwissenschaft; data collection method; empirical social research; individual; personality; Variabilität; survey research; soziale Indikatoren; Persönlichkeit; Umfrageforschung; empirische Sozialforschung; Erhebungsmethode
SSOAR Kategorie:Erhebungstechniken und Analysetechniken der Sozialwissenschaften
Funktionale Äquivalenz in interkulturell vergleichenden Umfragen: Mythos und Realität
Titelübersetzung:Functional equivalence in comparative intercultural surveys: myth and reality
Autor/in:
Braun, Michael
Quelle: GESIS-ZUMA; Mannheim, 2006. 294 S
Inhalt: "Interkulturell vergleichende Forschung, sei sie nun hypothesengeleitet oder explorativ, wird als exzellente Möglichkeit gesehen, den theoretischen und methodischen Fortschritt in den Sozialwissenschaften zu beschleunigen. Allerdings wird auch auf die besonderen Schwierigkeiten hingewiesen, die für interkulturell und international vergleichende Forschung spezifisch sind oder die sie mit anderen Bereichen der komparativen Forschung gemeinsam hat. Für komparative Studien gilt generell, dass sinnvoll nur verglichen werden kann, wenn inden einzelnen Ländern 'das Gleiche' gemessen wird. Die interkulturell vergleichende Umfrageforschung muss immer wieder neu die Frage beantworten, ob die zwischen Ländern gefundenen Unterschiede real oder aber Messartefakte sind. Erwartungen über funktionale Inäquivalenzen von Messinstrumenten und daraus resultierende Forschungsprobleme wurden in dieser Arbeit aus allgemeinen theoretischen Ansätzen abgeleitet. Diese beinhalten Annahmen über kognitive und motivationale Prozesse und Strukturen, die das Antwortverhalten beeinflussen und für die weitgehende interkulturelle Invarianz unterstellt werden kann." (Autorenreferat)
Das standardisierte Interview als soziale Interaktion: Interviewereffekte in der Umfrageforschung
Titelübersetzung:The standardized interview as social interaction: interviewer effects in survey research
Autor/in:
Haunberger, Sigrid
Quelle: ZA-Information / Zentralarchiv für Empirische Sozialforschung, (2006) 58, S 23-46
Inhalt: 'Dieser Artikel beschäftigt sich mit methodischen Problemen, die beim standardisierten face-to-face Interview durch die Interaktion zwischen Interviewern und Befragten entstehen. Auf der Datengrundlage einer Mehrthemenumfrage (Sozialwissenschaftenbus 2/96) werden zu drei Fragetypen (Antwort auf offene Fragen, Antwortverweigerung bei der Einkommensabfrage und Antworten zu Meinungsfragen) mögliche Interviewereffekte analysiert. Für alle drei Fragetypen lassen sich bedenkenswerte Zusammenhänge von Interviewermerkmalen und der Situation des Interviews feststellen: Intervieweralter und Interviewerbildung beeinflussen die Antworten auf offene Abfragen. Bei der Verweigerung der Einkommensabfrage bestehen ebenfalls deutliche Zusammenhänge mit dem Interviewergeschlecht und der Interviewerbildung sowie mit der Anwesenheit Dritter. Analysiert wurde auch ein Interaktionseffekt von Interviewer- und Befragtenmerkmalen. In 'homogenen' Bildungskonstellationen wird weniger verweigert. Zustimmungs- und Ablehnungstendenzen bei Meinungsfragen zeigen einen deutlichen Geschlechtseffekt.' (Autorenreferat)
Inhalt: 'This article focusses on methodological problems in standardized oral interviews which arise from the interaction between interviewer and respondent. With the data from Sozialwissenschaften-Bus 2/96, three possible interviewer effects are analyzed (responses to open questions, nonresponse to the income question and opinion questions). For all three topics, considerable influences of interviewer characteristics and the interview situation could be found: The responses to open questions vary with the interviewer's age and education. In nonresponse to the income question, there is a clear relation between interviewer's sex and education as well as influence of present others. There was also an interaction effect of interviewer and respondent-characteristics. Homogeneous education-groups show less nonresponse. Tendencies of acceptance or refusal to questions of opinion are related to the sex of the interviewer.' (author's abstract)|
Titelübersetzung:Methodologische Aspekte in der international vergleichenden Forschung
Herausgeber/in:
Hoffmeyer-Zlotnik, Jürgen H. P.; Harkness, Janet; GESIS-ZUMA
Quelle: GESIS-ZUMA; Mannheim (ZUMA-Nachrichten Spezial, 11), 2005. 299 S
Inhalt: Die Beiträge diese Heftes gehen zumeist auf mehrere Tagungen des Research Committee 33 (Logik und Methodologie) der International Sociological Association zurück. Im Mittelpunkt stehen Fragen der Messung sowie die Vergleichbarkeit, Reliabilität und Validität in der international vergleichenden empirischen Forschung. Die Beiträge sind vier Themengruppen zugeordnet. Im ersten Teil geht es um Design und Implementation kulturvergleichender Studien (Instrumentarium, Question Appraisal System, EU-Projekte, Fragebogenverstehen, Interpretation der Ergebnisse). Der zweite Teil ist verschiedenen Aspekten der "Äquivalenz"-Problematik gewidmet, vor allem in Bezug auf das International Social Survey Programme (ISSP) und den European Social Survey (ESS). Im dritten Teil wird die Harmonisierung soziodemographischer Information in unterschiedlichen Untersuchungen behandelt (amtliche Statistik, ESS, ISSP). Im abschließenden vierten Teil werden sozioökonomische Variablen in international vergleichender Perspektive diskutiert (Einkommen, Bildung, Beruf, Ethnizität, Religion). (ICE)
Inhalt: "Cross-national and cross-cultural survey research has been growing apace for several decades and interest in how best to do them has possibly never been greater. At the International Sociological Association Research Committee 33 (Logic and Methodology) several sessions were dedicated to cross-cultural cross-national survey methodology and the vast majority of the papers in this volume were presented at that conference. Researchers involved in comparative research have always been worried about measurement issues, comparability, reliability and validity of their data. But the design and execution of comparative studies has changed markedly since the early cross-national projects of the nineteen sixties and nineteen seventies." (excerpt). Contents: Jürgen H.P. Hoffmeyer-Zlotnik, Janet A. Harkness: Methodological aspects in cross-national research: foreword (5-10). I. Designing and implementing cross-cultural surveys - Johnny Blair, Linda Piccinino: The development and testing of instruments for cross-cultural and multi-cultural surveys (13-30); Elizabeth Dean Rachel Caspar, Georgina McAvinchey, Leticia Reed, Rosanna Quiroz: Developing a low-cost technique for parallel cross-cultural instrument development: the Question Appraisal System (QAS-04) (31-46); Felizitas Sagebiel: Using a mixed international comparable methodological approach in a European Commission project on gender and engineering (47-64); Timothy P. Johnson, Young Ik Cho, Allyson Holbrook, Diane O'Rourke, Richard Warnecke, Noel Chávez: Cultural variability in the effects of question design features on respondent comprehension (65-78); Kristen Miller, Gordon Willis, Connie Eason, Lisa Moses, Beth Canfield: Interpreting the results of cross-cultural cognitive interviews: a mixed-method approach (79-92). II. Different issues of comparability or "equivalence" - Michael Braun, Janet A. Harkness: Text and context: challenges to comparability in survey questions (95-108); Nina Rother: Measuring attitudes towards immigration across countries with the ESS: potential problems of equivalence (109-126); Vlasta Zucha: The level of equivalence in the ISSP 1999 and its implications on further analysis (127-146). III. Harmonising socio-demographic information in different types of surveys - Thomas Körner, Iris Meyer: Harmonising socio-demographic information in household surveys of official statistics: experiences from the Federal Statistical Office Germany (149-162); Kirstine Kolsrud, Knut Kalgraff Skjak: Harmonising background variables in the European Social Survey (163-182); Evi Scholz: Harmonisation of survey data in the International Social Survey Programme (ISSP) (183-200). IV. Socio-economic variables in cross-national perspective - Uwe Warner, Jürgen H.P. Hoffmeyer-Zlotnik: Measuring income in comparative social survey research (203-222); Jürgen H.P. Hoffmeyer-Zlotnik, Uwe Warner: How to measure education in cross-national comparison: Hoffmeyer-Zlotnik/Warner-Matrix of Education as a new instrument (223-240); Harry B.G. Ganzeboom: On the cost of being crude: a comparison of detailed and coarse occupational coding in the ISSP 1987 data (241-258); Paul S. Lambert: Ethnicity and the comparative analysis of contemporary survey data (259-278); Christof Wolf: Measuring religious affiliation and religiosity in Europe (279-294).