Titelübersetzung:Social presence in online surveys
Autor/in:
Schmidt-Catran, Alexander W.; Hörstermann, Katharina
Quelle: Methoden, Daten, Analysen (mda), 7 (2013) 3, S 397-432
Inhalt: "Onlinebefragungen zählen mittlerweile zum Standardrepertoire vieler Forschungsinstitute, einige methodische Fragen bleiben bis dato jedoch noch unbeantwortet. Diese Studie beschäftigt sich mit der Frage, ob durch die Simulation sozialer Präsenz das Antwortverhalten der Befragten beeinflusst werden kann. Mit einem experimentellen Design werden Effekte der sozialen Präsenz auf Nonresponse sowie sozial erwünschtes Antwortverhalten untersucht. Dabei wird davon ausgegangen, dass die Implementierung sozialer Präsenz den Vorteil einer erhöhten Teilnahmebereitschaft und den Nachteil von sozial erwünschtem Antwortverhalten mit sich bringen kann. Der inhaltliche Schwerpunkt des Experiments liegt auf Einstellungen zu Sexismus, Geschlechterrollen und der Berufstätigkeit von Frauen. Zur Simulation der sozialen Präsenz werden Fotografien verwendet. Zusätzlich zum Effekt der sozialen Präsenz wird untersucht, ob das Geschlecht und die Attraktivität der auf den Fotos gezeigten Personen einen Einfluss auf das Antwortverhalten haben. Bei diesem Effekt handelt es sich um eine Art 'Gender-of-Interviewer'-Effekt. Bezüglich der Teilnahme- und Antwortbereitschaft konnten keine positiven Effekte nachgewiesen werden. Die Ergebnisse hinsichtlich möglicher Interviewereffekte in Form von sozial erwünschtem Antwortverhalten sind nicht eindeutig, es tauchen aber systematische Unterschiede zwischen den Experimental- und der Kontrollgruppe auf." (Autorenreferat)
Inhalt: "Today, online surveys belong to the standard instruments of most survey research institutes, but some methodical questions are still unanswered. This study deals with the question of whether the simulation of social presence has an effect on the response style. Using an experimental design, the effects of social presence on non-response and socially desirable answers are tested. We expect social presence to lower non-response but to induce socially desirable answers. Topics of the survey are attitudes towards sexism, gender roles and the participation of women in the labor market. Social presence is simulated by pictures of the 'investigators' of the study. In addition to the effect of social presence, the study investigates whether the gender and the attractiveness of the person on the pictures have an effect on the answers. This effect might be called a 'gender-of-interviewer'-effect. Concerning the non-response rate no positive effect of social presence could be found. The results with regard to social desirability and a possible gender-of-interviewer-effect are ambiguous but show significant differences between the control group and our experimental groups." (author's abstract)
Testing the Validity of Gender Ideology Items by Implementing Probing Questions in Web Surveys
Autor/in:
Behr, Dorothée; Braun, Michael; Kaczmirek, Lars; Bandilla, Wolfgang
Quelle: Field Methods, 25 (2013) 2, S 124-141
Inhalt: This article examines the use of probing techniques in web surveys to identify validity problems of items. Conventional cognitive interviewing is usually based on small sample sizes and thus precludes quantifying the findings in a meaningful way or testing small or special subpopulations characterized by their response behavior. This article investigates probing in web surveys as a supplementary way to look at item validity. Data come from a web survey in which respondents were asked to give reasons for selecting a response category for a closed question. The web study was conducted in Germany, with respondents drawn from online panels (n = 1,023). The usefulness of the proposed approach is shown by revealing validity problems with a gender ideology item.
Schlagwörter:Befragung; survey; Online-Befragung; online survey; Gender; gender; Ideologie; ideology; Validität; validity; Panel; panel; Antwortverhalten; response behavior; Fehler; error; Deutungsmuster; pattern of interpretation; Interpretation; interpretation; Analyse; analysis; Indikator; indicator; Egalitarismus; egalitarianism; Rollenverteilung; role distribution; Rollenverständnis; role conception; ISSP; ISSP; Federal Republic of Germany; probing; web survey; gender ideology; ZA3880: International Social Survey Programme: Family and Changing Gender Roles III - ISSP 2002
SSOAR Kategorie:Erhebungstechniken und Analysetechniken der Sozialwissenschaften
Personalisation in advance letters does not always increase response rates: demographic correlates in a large scale experiment
Titelübersetzung:Personalisierung in Voraus-Briefen erhöhen nicht immer die Antwortraten: demographische Korrelationen in einem Großversuch
Autor/in:
Luiten, Annemieke
Quelle: Survey Research Methods, 5 (2011) 1, S 11-20
Inhalt: "This study was set up to examine whether personalizing advance letters by adding names and appropriate salutation, affects the survey cooperation of subgroups in the general population differently, in analogy to findings that subgroups react differently to advance letters. Differential reactions could be an explanation for the mixed findings in the literature on personalization of advance or cover letters. In a large scale study (N=39,518), information in communal registries was used to study (non)response patterns in subgroups, as a result of personalization. Advance letters of the Dutch CAPI Labor Force Survey were randomly assigned to addresses. In the non-personalized version (N=30,899), letters were addressed to 'the inhabitants of '. In the personalized version (N=8,619), the name or names of the household core were derived from municipal registries and used for addressing the letter. A re-interview addressed the issue whether the advance letter was read by more households when the household was addressed by name. By linking the sample to registries, it was possible to study response behavior of subgroups. The study focused on groups the literature indicates as differentially reacting to advance letters, i.e., different age, ethnic, gender, household composition and income groups, and groups with or without a listed telephone number. Hardly any difference in the overall level of cooperation was found if either a personalized or non-personalized letter was used. However, differential reactions were found for listed versus unlisted telephone owners, where only listed households reacted positively to personalization. In the other subgroups studied, no firm evidence of differential reactions were found. The paper discusses what these results signify for sample composition and the risk of bias." (author's abstract)
Sozial erwünschtes Antwortverhalten bezüglich der Teilung häuslicher Arbeit: die Interaktion von Interviewergeschlecht und Befragtenmerkmalen in Telefoninterviews
Titelübersetzung:Social desirability and response bias in case of the division of household labour: the interaction between gender of the interviewer and respondent characteristics in telephone interviews
Autor/in:
Klein, Markus; Kühhirt, Michael
Quelle: Methoden, Daten, Analysen (mda), 4 (2010) 2, S 79-104
Inhalt: "Der Beitrag untersucht den Einfluss des Interviewergeschlechts auf das Antwortverhalten von Befragten bezüglich der Teilung häuslicher Arbeit in telefonischen Interviews. Aufgrund einer Diskrepanz zwischen öffentlich vertretenen egalitären Geschlechterrollen und der noch immer geringen männlichen Beteiligung an der Hausarbeit wird auf Basis von Rational-Choice Argumenten erwartet, dass männliche Befragte bei weiblichen Interviewern sozial erwünscht antworten und ihre Beteiligung an der Hausarbeit überschätzen. Dagegen ist anzunehmen, dass Frauen ihren relativen Anteil an der partnerschaftlichen Hausarbeit eher unterschätzen. Interviewereffekte des Geschlechts sollten bei weiblichen Befragten jedoch geringer ausfallen als bei Männern. Da sich vor allem junge bzw. gebildete Befragte egalitärer Rollenvorstellungen bewusst sind, sollten vor allem diese Gruppen anfällig für derartige Interviewereffekte sein. Für männliche Befragte entsprechen die Ergebnisse weitestgehend den Erwartungen, wobei das Interviewergeschlecht in Abhängigkeit vom Alter des Befragten die stärkeren Effekte zeigt. Für weibliche Befragte zeigen sich über alle Altersgruppen und Bildungsabschlüsse dagegen keine signifikanten Effekte. Die Ergebnisse verdeutlichen, dass sozial erwünschtes Antwortverhalten auch bei Auskünften über konkretes Alltagshandeln auftreten kann. Hinzu kommt eine beträchtliche Heterogenität der Effekte über unterschiedliche Bevölkerungsgruppen." (Autorenreferat)
Inhalt: "In this paper the authors examine the impact of the interviewer's gender on respondents' self-reported share of housework in telephone interviews. Due to a discrepancy between modern, egalitarian gender roles dominating public discussion and men's marginal participation in housework they expect male respondents to answer in a socially desirable way and exaggerate their share of housework vis à vis female interviewers. At the same time, they assume that female respondents underreport their contribution to the couple's housework to female interviewers. The effects of the interviewer's gender should be less strong in case of female respondents than in case of male respondents, though. Additionally, theory suggests that young and educated respondents are particularly susceptible to effects of the interviewer's gender as they are most aware of egalitarian gender roles due to their socialization and environment. For male respondents the results are largely consistent with the expectations. However, the effect of the interviewer's gender varies stronger by age than by education. Regarding female respondents the results do not indicate any significant effects across age groups and educational degrees. Overall, the results show that social desirability may also bias self-reports of everyday behaviour. Moreover, interviewer effects vary considerably between different social groups." (author's abstract)
Reasons for refusals, their collection in surveys and interviewer impact
Autor/in:
Menold, Natalja; Züll, Cornelia
Quelle: GESIS - Leibniz-Institut für Sozialwissenschaften; Mannheim (GESIS-Working Papers, 2010/11), 2010. 35 S
Inhalt: "Refusals are a significant source of non-response in surveys. During field periods of some surveys reasons for refusals are collected in call record data (as part of para-data). This article presents a study employing a content analysis of open-ended comments on reasons for refusals collected by interviewers in a survey of the German population (ALLBUS). We analysed the reasons for refusals contained in these comments, as well as to what extent these comments include information about factors relevant to participation in surveys. Additionally, we analysed the impact of interviewer characteristics – gender, age, education and experience – on data collection using various multilevel multinomial models. The results show that interviewer comments provide typical reasons for refusals, as well as specific information about target persons, their environment and the survey process. Interviewers' age and education influenced the collection of reasons for refusals. At the same time interviewer variances (obtained through multinomial multilevel models) were very high, showing that interviewers prefer to report certain reasons for refusals. The highest interviewer level variances were obtained for providing no comments at all. To improve data quality and reduce high interviewer impact, we suggest using
improved standardised instruments to collect reasons for refusals. Codings based on a categorisation scheme which we developed for our content analysis show high reliability (kappa = .81). Thus, this scheme can be used as a basis for developing such standardised instruments." (author's abstract)
Autor/in:
Bollinger, Christopher R.; Hirsch, Barry T.
Quelle: Rat für Sozial- und Wirtschaftsdaten (RatSWD); Berlin (RatSWD Working Paper Series, 165), 2010. 22 S
Inhalt: "Earnings nonresponse in the Current Population Survey is roughly 30% in the monthly surveys and 20% in the annual March survey. Even if nonresponse is random, severe bias attaches to wage equation coefficient estimates on attributes not matched in the earnings imputation hot deck. If nonresponse is ignorable, unbiased estimates can be achieved by omitting imputed earners, yet little is known about whether or not CPS nonresponse is ignorable. Using sample frame measures to identify selection, we find clear-cut evidence among men but limited evidence among women for negative selection into response. Wage equation slope coefficients are affected little by
selection but because of intercept shifts, wages for men and to a lesser extent women are understated, as are gender wage gaps. Selection is less severe among household heads/co-heads than among other household members." [author's abstract]
Differential response rates in postal and web-based surveys in older respondents
Titelübersetzung:Unterschiedliche Antwortraten bei postalischen und webbasierten Untersuchungen bei älteren Befragten
Autor/in:
Bech, Mickael; Kristensen, Morton Bo
Quelle: Survey Research Methods, 3 (2009) 1, S 1-6
Inhalt: "Response rates were compared across a postal and a web-based survey containing the same questions about preferences for future for the design of future nursing homes which were sent to a random sample of 10.000 individuals aged 50-75 years. The 10.000 individuals were randomly allocated to receive a postal questionnaire or a letter with a web link to an online version of the same questionnaire. The web-based survey gave a significantly lower response rate than the postal survey. The web-based version improved the sample representativeness with respect to gender but worsened the representativeness with respect to age. Respondents' characteristics in the web-based survey differed significantly from those of respondents in the postal survey with respect to income, education, civil status and health status. The web-based version improved data quality by significantly lowering the number of item non-response and 'don't know' answers. Respondents found it easier to answer the web-based survey. The cost per response was significantly higher for the web-based survey because of the significantly lower response rate compared to the postal survey." (author's abstract)
Schlagwörter:website; alter Mensch; Internet; Pflegeheim; postalische Befragung; Denmark; Datenqualität; questionnaire; data quality; Dänemark; Fragebogen; Antwortverhalten; cost-benefit analysis; representativity; survey; future; Befragung; Zukunft; Website; Kosten-Nutzen-Analyse; Repräsentativität; Internet; mail survey; elderly; response behavior; nursing home
SSOAR Kategorie:Forschungsarten der Sozialforschung, Erhebungstechniken und Analysetechniken der Sozialwissenschaften
Funktionale Äquivalenz in interkulturell vergleichenden Umfragen: Mythos und Realität
Titelübersetzung:Functional equivalence in comparative intercultural surveys: myth and reality
Autor/in:
Braun, Michael
Quelle: GESIS-ZUMA; Mannheim, 2006. 294 S
Inhalt: "Interkulturell vergleichende Forschung, sei sie nun hypothesengeleitet oder explorativ, wird als exzellente Möglichkeit gesehen, den theoretischen und methodischen Fortschritt in den Sozialwissenschaften zu beschleunigen. Allerdings wird auch auf die besonderen Schwierigkeiten hingewiesen, die für interkulturell und international vergleichende Forschung spezifisch sind oder die sie mit anderen Bereichen der komparativen Forschung gemeinsam hat. Für komparative Studien gilt generell, dass sinnvoll nur verglichen werden kann, wenn inden einzelnen Ländern 'das Gleiche' gemessen wird. Die interkulturell vergleichende Umfrageforschung muss immer wieder neu die Frage beantworten, ob die zwischen Ländern gefundenen Unterschiede real oder aber Messartefakte sind. Erwartungen über funktionale Inäquivalenzen von Messinstrumenten und daraus resultierende Forschungsprobleme wurden in dieser Arbeit aus allgemeinen theoretischen Ansätzen abgeleitet. Diese beinhalten Annahmen über kognitive und motivationale Prozesse und Strukturen, die das Antwortverhalten beeinflussen und für die weitgehende interkulturelle Invarianz unterstellt werden kann." (Autorenreferat)
Das standardisierte Interview als soziale Interaktion: Interviewereffekte in der Umfrageforschung
Titelübersetzung:The standardized interview as social interaction: interviewer effects in survey research
Autor/in:
Haunberger, Sigrid
Quelle: ZA-Information / Zentralarchiv für Empirische Sozialforschung, (2006) 58, S 23-46
Inhalt: 'Dieser Artikel beschäftigt sich mit methodischen Problemen, die beim standardisierten face-to-face Interview durch die Interaktion zwischen Interviewern und Befragten entstehen. Auf der Datengrundlage einer Mehrthemenumfrage (Sozialwissenschaftenbus 2/96) werden zu drei Fragetypen (Antwort auf offene Fragen, Antwortverweigerung bei der Einkommensabfrage und Antworten zu Meinungsfragen) mögliche Interviewereffekte analysiert. Für alle drei Fragetypen lassen sich bedenkenswerte Zusammenhänge von Interviewermerkmalen und der Situation des Interviews feststellen: Intervieweralter und Interviewerbildung beeinflussen die Antworten auf offene Abfragen. Bei der Verweigerung der Einkommensabfrage bestehen ebenfalls deutliche Zusammenhänge mit dem Interviewergeschlecht und der Interviewerbildung sowie mit der Anwesenheit Dritter. Analysiert wurde auch ein Interaktionseffekt von Interviewer- und Befragtenmerkmalen. In 'homogenen' Bildungskonstellationen wird weniger verweigert. Zustimmungs- und Ablehnungstendenzen bei Meinungsfragen zeigen einen deutlichen Geschlechtseffekt.' (Autorenreferat)
Inhalt: 'This article focusses on methodological problems in standardized oral interviews which arise from the interaction between interviewer and respondent. With the data from Sozialwissenschaften-Bus 2/96, three possible interviewer effects are analyzed (responses to open questions, nonresponse to the income question and opinion questions). For all three topics, considerable influences of interviewer characteristics and the interview situation could be found: The responses to open questions vary with the interviewer's age and education. In nonresponse to the income question, there is a clear relation between interviewer's sex and education as well as influence of present others. There was also an interaction effect of interviewer and respondent-characteristics. Homogeneous education-groups show less nonresponse. Tendencies of acceptance or refusal to questions of opinion are related to the sex of the interviewer.' (author's abstract)|
The effect of interviewer and respondent characteristics on refusals in a panel survey
Titelübersetzung:Charakteristika von Interviewern und Befragten in ihrem Einfluss auf Antwortverweigerung bei einer Panel-Studie
Autor/in:
Loosveldt, Geert; Carton, Ann; Pickery, Jan
Quelle: Zentrum für Umfragen, Methoden und Analysen -ZUMA-; Koch, Achim; Porst, Rolf; International Workshop on Household Survey Nonresponse; Mannheim (ZUMA-Nachrichten Spezial, 4), 1998. S 249-262
Inhalt: Die vorliegende Untersuchung basiert auf Daten einer Panelstudie aus dem Bereich der Wahlforschung. Die Ergebnisse zeigen, dass politisch Interessierte mit höherer Wahrscheinlichkeit an der zweiten Welle einer Panel-Studie teilnehmen und dass der erste Kontakt für das zweite Interview vor allem bei Frauen mit niedrigem Bildungsstand sehr wichtig ist. Der Interviewereffekt wurde mit Hilfe einer Mehrebenenanalyse untersucht. Diese Analyse zeigt, dass der von den Interviewern des Jahres 1991 auf die Antwortverweigerungen 1995 ausgehende Effekt stärker war als der Effekt, der von den Interviewern des Jahres 1995 ausgelöst wurde. Dieses bemerkenswerte Ergebnis unterstreicht die Bedeutung, die die beim ersten Interview gemachten Erfahrungen haben. Anhand verschiedener Charakteristika wurden die Unterschiede zwischen den Interviewern modelliert. Ein signifikanter Effekt ging nur von der Anzahl der Interviews aus, die ein Interviewer durchführte: mehr Interviews bedeuten mehr Verweigerungen. (ICEÜbers)
Inhalt: "In this paper data from an election panel survey are used. The results make clear that respondents who are more interested in politics are more likely to take part in the second interview of an election panel survey and that the initial contact for the second interview is extremely important for the group of poorly educated women. To evaluate the effect of the interviewer a multi level analysis was done. The results of this analysis show that the effect of the interviewers used in '91 an the refusals realized in '95 is more significant then the effect of the interviewers used in '95. This remarkable result stresses the importance of the experience of the first interview. Several interviewer characteristics were used to model the differences between the interviewers. Only the number of interviews done by an interviewer has a significant effect: more interviews result in more refusals." (author's abstract)