Zitatform

Stein, Annika, Tobias Gummer, Elias Naumann, Björn Rohr, Henning Silber, Roman Auriga, Michael Bergmann, Arne Bethmann, Michael Blohm, Carina Cornesse, Pablo Christmann, Mustafa Coban, Jean Philippe Décieux, Britta Gauly, Caroline Hahn, Susanne Helmschrott, Oshrat Hochman, Johannes Lemcke, Dörte Naber, Steffen Pötzschke, Joss Roßmann, Jan-Lucas Schanze, Tobias Schmidt, Silke L. Schneider, Heike Spangenberg, Tobias Rettig, Bernd Weiß, Mark Trappmann & Michael Weinhardt (2025): Education bias in probability-based surveys in Germany: evidence and possible solutions. In: International Journal of Social Research Methodology, S. 1-18. DOI:10.1080/13645579.2025.2508889

Abstract

"This paper outlines two studies on education bias in German probability-based surveys. Study 1 reviews data from 67 surveys across 19 survey programs conducted in Germany from 2000 to 2023. We found a consistent underrepresentation of individuals with a low level of formal education. We also found that the transition to self-administered modes due to rising survey costs may exacerbate this bias in the future. In study 2, we use the results of a workshop with experts on probability-based surveys, to discuss various strategies to deal with this bias, including increased face-to-face contacts and incentives, while emphasizing the need for research on adapting survey designs. Our findings underscore the urgency for further research to understand the nonparticipation mechanisms among less educated individuals and develop effective countermeasures. We advocate for collaborative efforts among survey researchers, cross-country comparative research, and consideration of potential trade-offs with other data quality dimensions." (Author's abstract, IAB-Doku) ((en))

Zitatform

Jesske, Birgit, Sabine Schulz & Vincent Gerber (2024): Panel Arbeitsmarkt und Soziale Sicherung PASS-Erhebungswelle 17/2023 (Haupterhebung). (FDZ-Methodenreport 05/2024 (de)), Nürnberg, 201 S. DOI:10.5164/IAB.FDZM.2405.de.v1

Abstract

"Vor dem Hintergrund der besonderen Zusammensetzung der Personen mit SGB-II-Bezug werden im PASS alle Nationalitäten berücksichtigt und auch fremdsprachige Befragungen durchgeführt. Zu Beginn waren die Erhebungssprachen auf Russisch und Türkisch begrenzt. Seit Welle 10 wurde auf die gesonderte Bereitstellung eines türkischsprachigen Erhebungsinstruments verzichtet, da die Befragungen in türkischer Sprache in den Haushalten nur noch in sehr wenigen Fällen notwendig waren. Dafür wurde aufgrund der verstärkten Flüchtlingszuwanderung seit 2014 aus Syrien und dem Irak, die Haushalte seit Welle 10 auch auf Arabisch befragt. In Welle 17 wurde aufgrund der aktuellen Entwicklungen in der Grundgesamtheit der SGB-II-Haushalte Ukrainisch als weitere Erhebungssprache hinzugenommen, um dem seit Frühjahr 2022 verstärkten Zuzug von Flüchtlingen aus der Ukraine gerecht zu werden. Mit der Erweiterung der Erhebungssprache wird im PASS sichergestellt, dass anerkannte Flüchtlinge aus den häufigsten Herkunftsländern im Rahmen der jährlichen Auffrischungsstichproben der Grundsicherungsempfänger erreicht und dann auch im Panel weiterverfolgt werden." (Autorenreferat, IAB-Doku)

Zitatform

Mühlbacher, Vanessa & Mark Trappmann (2024): Implementierung eines Web-basierten Datenerhebungsmodus in einem bestehenden Panel der Allgemeinbevölkerung: Eine Analyse der Selektions- & Messeffekte. (FDZ-Methodenreport 01/2024 (de)), Nürnberg, 74 S. DOI:10.5164/IAB.FDZM.2401.de.v1

Abstract

"Dieser Methodenreport untersucht die Selektions- und Messeffekte des ersten Websurveys des Panels Arbeitsmarkt und soziale Sicherung (PASS). Die Modellierung der Selektionseffekte ist Grundlage für die Gewichtung des Websurveys und kann als ergänzende ausführliche Dokumentation hierzu aufgefasst werden. Die Untersuchung der Messeffekte gibt Aufschluss darüber, bei welchen Fragen womöglich nur eine eingeschränkte Vergleichbarkeit zwischen den intervieweradministrierten Modi der Haupterhebung von PASS und dem PASS-Websurvey vorliegt. Web-Befragungen werden immer beliebter. Neben den Vorteilen wie schnellere Verfügbarkeit von Daten und geringeren Kosten gibt es allerdings auch Nachteile. So können Web- Befragungen im Vergleich zu Modi mit Interviewenden oftmals weniger Menschen erreichen (geringere Responserate) und werden dabei bestimmte Gruppen (z.B. Ältere, gering Gebildete) unterrepräsentiert (Nonresponse-Bias). Befragte müssen ein gewisses Maß an Internetaffinität mitbringen und können nicht durch Interviewende zur Teilnahme motiviert werden. Oftmals wird der Web-Modus daher nicht als Ersatz, sondern als Ergänzung zu bestehenden Modi verwendet. Dabei wird darauf abgezielt, dass sich die Selektionseffekte der verwendeten Modi gegenseitig ausgleichen. Gleichzeitig besteht ein Risiko, dass sich die unterschiedlichen Modi zu Unterschieden in der Messung führen. In diesem Methodenreport wird untersucht, welche Selektionseffekte die Einführung eines Web-Modus in einem bestehenden Panel, dem Panel Arbeitsmarkt und Soziale Sicherung (PASS), mit sich bringt. Zudem wird die Möglichkeit, vorhandenen Nonresponse-Bias mittels Gewichtung auszugleichen, geprüft. Dabei wird überprüft, ob die vergleichsweise neue Methode des Random Forests geeigneter ist als die klassisch verwendete Methode der logistischen Regression. Schließlich werden die Messfehler zwischen dem Web- Modus und den bestehenden Modi des PASS (CAPI und CATI) verglichen. Konkret wird dabei auf Item-Nonresponse, Akquieszenz, Recency sowie sozial erwünschtes Antworten eingegangen. Es zeigt sich, dass der Web-Modus Randgruppen systematisch ausschließt. Vor allem ökonomisch Schwächere, Menschen mit Migrationshintergrund sowie Personen mit niedrigem Bildungsniveau sind im Web-Survey unterrepräsentiert. Das Ausgleichen dieses Bias mittels Gewichtung funktioniert insgesamt gesehen mit der Methode der logistischen Regression besser als mit jener des Random Forests. Es können teilweise große Unterschiede bei den Messfehlern in den verschiedenen Modi gefunden werden, wobei diese nicht immer in die erwartete Richtung gehen." (Autorenreferat, IAB-Doku)

Zitatform

Jesske, Birgit, Sabine Schulz & Vincent Gerber (2023): Panel Arbeitsmarkt und Soziale Sicherung PASS-Erhebungswelle 16/2022 (Haupterhebung). (FDZ-Methodenreport 06/2023 (de)), Nürnberg, 225 S. DOI:10.5164/IAB.FDZM.2306.de.v1

Abstract

Vor dem Hintergrund der besonderen Zusammensetzung der Personen mit SGB-II-Bezug werden im PASS alle Nationalitäten berücksichtigt und auch fremdsprachige Befragungen durchgeführt. Zu Beginn waren die Erhebungssprachen auf Russisch und Türkisch begrenzt. Mit der in Deutschland verstärkten Flüchtlingszuwanderung seit 2014 werden seit der Erhebungswelle 10 im PASS Haushalte und Personen auf Arabisch befragt. Für die Gruppe syrischer und irakischer Haushalte wurde in einigen Wellen zudem ein Oversampling vorgenommen. Die gesonderte Bereitstellung eines türkischsprachigen Erhebungsinstruments wurde mit der Welle 10 eingestellt, da Befragungen in türkischer Sprache in den Haushalten nur noch in sehr wenigen Fällen notwendig waren. 753 | Vor dem Hintergrund der besonderen Zusammensetzung der Personen mit SGB-II-Bezug werden im PASS alle Nationalitäten berücksichtigt und auch fremdsprachige Befragungen durchgeführt. Zu Beginn waren die Erhebungssprachen auf Russisch und Türkisch begrenzt. Mit der in Deutschland verstärkten Flüchtlingszuwanderung seit 2014 werden seit der Erhebungswelle 10 im PASS Haushalte und Personen auf Arabisch befragt. Für die Gruppe syrischer und irakischer Haushalte wurde in einigen Wellen zudem ein Oversampling vorgenommen. Die gesonderte Bereitstellung eines türkischsprachigen Erhebungsinstruments wurde mit der Welle 10 eingestellt, da Befragungen in türkischer Sprache in den Haushalten nur noch in sehr wenigen Fällen notwendig waren.

Zitatform

Jesske, Birgit & Vincent Gerber (2023): Panel Arbeitsmarkt und Soziale Sicherung PASS-Websurvey Haupterhebung 2022. (FDZ-Methodenreport 07/2023 (de)), Nürnberg, 105 S. DOI:10.5164/IAB.FDZM.2307.de.v1

Abstract

"Das Institut für Arbeitsmarkt- und Berufsforschung (IAB) hat 2006 eine Studie im Niedrigeinkommensbereich (IAB-Haushaltspanel) aufgesetzt, die eine neue Datengrundlage für die Funktionsweise und Folgen des neuen Sozialsystems SGB II in privaten Haushalten in Deutschland schaffen soll. Die als Panel angelegte Studie erfasst über einen längeren Zeitraum hinweg Lebens- und Problemlagen von sowohl Leistungsempfängern als auch einer Kontrollgruppe. Befragt werden alle Personen ab 15 Jahren in ausgewählten Haushalten. In der 16. Erhebungswelle wird erstmalig der Einstieg in die selbstadministrierte Erhebung im Webmodus getestet. Mit diesem Modus ergibt sich für PASS einerseits die Option zukünftig zusätzliche Module zu erheben, die zur Kürzung des Fragebogenprogramms der jährlichen Panelerhebung beitragen könnten. Andererseits sollten die optimalen Abläufe bei der Durchführung von Webbefragungen in der PASS-Zielgruppe sowie die Erreichbarkeit und Akzeptanz der Panelteilnehmerinnen und -teilnehmer erprobt werden. Für die Haupterhebung des Websurveys erfolgte eine eigenständige Erhebung nach Abschluss der Panelhaupterhebung der PASS Welle 16. Alle Teilnehmerinnen und Teilnehmer der Welle 16 der Panelhaupterhebung bildeten die Zielgruppe für den Websurvey und erhielten postalisch einen persönlichen Zugangslink zu einem kurzen Online-Fragebogen. Die Feldzeit für den Websurvey war auf vier Feldwochen von Ende Oktober bis Ende November 2022 begrenzt und sollte damit rechtzeitig abgeschlossen werden, bevor im Februar 2023 die Panelhaupterhebung für die Welle 17 im PASS startete. 753 | Das Institut für Arbeitsmarkt- und Berufsforschung (IAB) hat 2006 eine Studie im Niedrigeinkommensbereich (IAB-Haushaltspanel) aufgesetzt, die eine neue Datengrundlage für die Funktionsweise und Folgen des neuen Sozialsystems SGB II in privaten Haushalten in Deutschland schaffen soll. Die als Panel angelegte Studie erfasst über einen längeren Zeitraum hinweg Lebens- und Problemlagen von sowohl Leistungsempfängern als auch einer Kontrollgruppe. Befragt werden alle Personen ab 15 Jahren in ausgewählten Haushalten. In der 16. Erhebungswelle wird erstmalig der Einstieg in die selbstadministrierte Erhebung im Webmodus getestet. Mit diesem Modus ergibt sich für PASS einerseits die Option zukünftig zusätzliche Module zu erheben, die zur Kürzung des Fragebogenprogramms der jährlichen Panelerhebung beitragen könnten. Andererseits sollten die optimalen Abläufe bei der Durchführung von Webbefragungen in der PASS-Zielgruppe sowie die Erreichbarkeit und Akzeptanz der Panelteilnehmerinnen und -teilnehmer erprobt werden. Für die Haupterhebung des Websurveys erfolgte eine eigenständige Erhebung nach Abschluss der Panelhaupterhebung der PASS Welle 16. Alle Teilnehmerinnen und Teilnehmer der Welle 16 der Panelhaupterhebung bildeten die Zielgruppe für den Websurvey und erhielten postalisch einen persönlichen Zugangslink zu einem kurzen Online-Fragebogen. Die Feldzeit für den Websurvey war auf vier Feldwochen von Ende Oktober bis Ende November 2022 begrenzt und sollte damit rechtzeitig abgeschlossen werden, bevor im Februar 2023 die Panelhaupterhebung für die Welle 17 im PASS startete." (Autorenreferat, IAB-Doku)

Zitatform

Keusch, Florian, Sebastian Bähr, Georg-Christoph Haas, Frauke Kreuter & Mark Trappmann (2023): Coverage error in data collection combining mobile surveys with passive measurement using apps. Data from a German national survey. In: Sociological methods & research, Jg. 52, H. 2, S. 841-878., 2020-01-24. DOI:10.1177/0049124120914924

Abstract

"Researchers are combining self-reports from mobile surveys with passive data collection using sensors and apps on smartphones increasingly more often. While smartphones are commonly used in some groups of individuals, smartphone penetration is significantly lower in other groups. In addition, different operating systems (OSs) limit how mobile data can be collected passively. These limitations cause concern about coverage error in studies targeting the general population. Based on data from the Panel Study Labour Market and Social Security (PASS), an annual probability-based mixed-mode survey on the labor market and poverty in Germany, we find that smartphone ownership and ownership of smartphones with specific OSs are correlated with a number of sociodemographic and substantive variables. The use of weighting techniques based on sociodemographic information available for both owners and nonowners reduces these differences but does not eliminate them." (Author's abstract, IAB-Doku) ((en))

Zitatform

Sakshaug, Joseph, Jonas Beste & Mark Trappmann (2023): Effects of mixing modes on nonresponse and measurement error in an economic panel survey. In: Journal for labour market research, Jg. 57, 2022-12-05. DOI:10.1186/s12651-022-00328-1

Abstract

"Numerous panel surveys around the world use multiple modes of data collection to recruit and interview respondents. Previous studies have shown that mixed-mode data collection can improve response rates, reduce nonresponse bias, and reduce survey costs. However, these advantages come at the expense of potential measurement differences between modes. A major challenge in survey research is disentangling measurement error biases from nonresponse biases in order to study how mixing modes affects the development of both error sources over time. In this article, we use linked administrative data to disentangle both nonresponse and measurement error biases in the long-running mixed-mode economic panel study “Labour Market and Social Security” (PASS). Through this study design we answer the question of whether mixing modes reduces nonresponse and measurement error biases compared to a single-mode design. In short, we find that mixing modes reduces nonresponse bias for most variables, particularly in later waves, with only small effects on measurement error bias. The total bias and mean-squared error are both reduced under the mixed-mode design compared to the counterfactual single-mode design, which is a reassuring finding for mixed-mode economic panel surveys." (Author's abstract, IAB-Doku, © Springer-Verlag) ((en))

Zitatform

Jesske, Birgit, Sabine Schulz & Vincent Gerber (2022): Panel Arbeitsmarkt und Soziale Sicherung PASS-Erhebungswelle 15/2021 (Haupterhebung). (FDZ-Methodenreport 06/2022 (de)), Nürnberg, 163 S. DOI:10.5164/IAB.FDZM.2206.de.v1

Abstract

"Vor dem Hintergrund der besonderen Zusammensetzung der Personen mit SGB-II-Bezug werden im PASS alle Nationalitäten berücksichtigt und auch fremdsprachige Befragungen durchgeführt. Zu Beginn waren die Erhebungssprachen auf Russisch und Türkisch begrenzt. Mit der in Deutschland verstärkten Flüchtlingszuwanderung seit 2014 werden seit der Erhebungswelle 10 im PASS Haushalte und Personen auf Arabisch befragt. Für die Gruppe syrischer und irakischer Haushalte wurde in einigen Wellen zudem ein Oversampling vorgenommen. Die gesonderte Bereitstellung eines türkischsprachigen Erhebungsinstruments wurde mit der Welle 10 eingestellt, da Befragungen in türkischer Sprache in den Haushalten nur noch in sehr wenigen Fällen notwendig waren." (Autorenreferat, IAB-Doku)

Zitatform

Beste, Jonas, Lukas Olbrich & Silvia Schwanhäuser (2021): Interviewer:innenkontrolle im Panel Arbeitsmarkt und soziale Sicherung (PASS). (FDZ-Methodenreport 04/2021 (de)), Nürnberg, 11 S. DOI:10.5164/IAB.FDZM.2104.de.v1

Abstract

"Im Panel Arbeitsmarkt und soziale Sicherung (PASS, DOI: 10.5164/IAB.PASS-SUF0619.de.en.v2) (Trappmann et al., 2013, 2019) werden stets neue Methoden zur Qualitätssicherung entwickelt und angewendet. In diesem Bericht werden die Ergebnisse eines Projekts zu abweichendem Interviewer:innenverhalten zusammengefasst. Im Fokus der verbesserten Qualitätskontrollen stehen dabei insbesondere statistische Kontrollmethoden wie die Analyse von Zeitmarken, längsschnittliche Korrelationsanalysen sowie etablierte statistische Indikatoren. Im Rahmen dieser Analysen wurden zwei Interviewer:innen identifiziert, die zumindest nennenswerte Teile der von ihnen abgelieferten Interviews nicht regulär durchgeführt haben. Die Fälle dieser Interviewer:innen wurden aus den Daten entfernt. Insgesamt ist die Anzahl an betroffenen Interviews jedoch gering. Im PASS wurden 0,41 Prozent der Personeninterviews und 0,37 Prozent der Haushaltsinterviews entfernt. Auch die einzelnen Teilstichproben sind nur geringfügig betroffen. In zukünftigen PASS-Wellen werden diese Qualitätskontrollen standardmäßig bereits während der Feldarbeit durchgeführt." (Autorenreferat, IAB-Doku)

Zitatform

Collischon, Matthias (2021): Identifying supervisory or managerial status in administrative records. (IAB-Discussion Paper 20/2021), Nürnberg, 17 S.

Abstract

"Informationen darüber, ob Individuen eine Position mit Führungsaufgaben innehaben, sind wichtig für die Arbeitsmarktforschung. Leider ist es nicht einfach möglich, diese Aufgaben in deutschen administrativen Daten zu identifizieren. Dieser Beitrag nutzt Surveyinformationen aus dem Panel Arbeitsmarkt und soziale Sicherung (PASS), um Personen mit Führungsaufgaben in administrativen Daten, zum Beispiel dem SIAB, vorherzusagen. Als Beispiel für die Anwendung untersuche ich Geschlechterunterschiede in der Wahrscheinlichkeit, eine Position mit Führungsaufgaben zu haben." (Autorenreferat, IAB-Doku)

Zitatform

Jesske, Birgit & Sabine Schulz (2021): Panel Arbeitsmarkt und Soziale Sicherung PASS-Erhebungswelle 14 - 2020 (Haupterhebung). (FDZ-Methodenreport 06/2021 (de)), Nürnberg, 153 S. DOI:10.5164/IAB.FDZM.2106.de.v1

Abstract

"Bereits in Erhebungswelle 10 hat PASS auf die Herausforderung reagiert, dass sich die Zusammensetzung der Zielgruppe der SGB-II-Empfänger verändert hat. Ausgelöst durch die verstärkte Flüchtlingszuwanderung seit 2014 in Deutschland finden sich unter den Leistungsempfängern größere Anteile aus arabischsprachigen Herkunftsländern, die über die nächsten Jahre im PASS befragt werden sollen. Dafür wurden in Welle 10 neben dem Einsatz eines arabischen Erhebungsinstruments verschiedene Maßnahmen zur Kontaktierung und Interviewführung getroffen und weiterentwickelt, die in den Folgewellen erneut zum Einsatz kamen. Während in Welle 10 ein Oversampling für Neuzugänge ins SGB II mit syrischer und irakischer Nationalität erfolgte, sind syrische/irakische Haushalte seit Welle 11 in den Auffrischungsstichproben auch ohne diese Maßnahme ausreichend vertreten. Die Erfahrungen aus den Vorwellen haben gezeigt, dass sich Kontaktierung und Interviewführung, aber auch Bearbeitungsergebnisse in dieser Gruppe noch deutlich von der üblichen SGB-II-Stichprobe unterscheiden. Vor diesem Hintergrund werden im Methodenbericht Ergebnisse nach Stichprobengruppen getrennt ausgewiesen, so dass syrische/irakische Haushalte sowohl im Panel als auch für die Auffrischungsstichprobe immer eine eigene Gruppe innerhalb der SGB-II-Stichproben bilden." (Autorenreferat, IAB-Doku)

Zitatform

Schierholz, Malte & Matthias Schonlau (2021): Machine learning for occupation coding - a comparison study. In: Journal of survey statistics and methodology, Jg. 9, H. 5, S. 1013-1034., 2020-07-07. DOI:10.1093/jssam/smaa023

Abstract

"Asking people about their occupation is common practice in surveys and censuses around the world. The answers are typically recorded in textual form and subsequently assigned (coded) to categories, which have been defined in official occupational classifications. While this coding step is often done manually, substituting it with more automated workflows has been a longstanding goal, promising reduced data-processing costs and accelerated publication of key statistics. Although numerous researchers have developed different algorithms for automated occupation coding, the algorithms have rarely been compared with each other or tested on different data sets. We fill this gap by comparing some of the most promising algorithms found in the literature and testing them on five data sets from Germany. The first two algorithms we test exemplify a common practice in which answers are coded automatically according to a predefined list of job titles. Statistical learning algorithms - that is, regularized multinomial regression, tree boosting, or algorithms developed specifically for occupation coding (algorithms three to six) - can improve upon algorithms one and two, but only if a sufficient number of training observations from previous surveys is available. The best results are obtained by merging the list of job titles with coded answers from previous surveys before using this combined training data for statistical learning (algorithm 7). However, the differences between the algorithms are often small compared to the large variation found across different data sets, which we ascribe to systematic differences in the way the data were coded in the first place. Such differences complicate the application of statistical learning, which risks perpetuating questionable coding decisions from the training data to the future." (Author's abstract, IAB-Doku) ((en))

Zitatform

Bossler, Mario & Christian Westermeier (2020): Measurement error in minimum wage evaluations using survey data. (IAB-Discussion Paper 11/2020), Nürnberg, 49 S.

Abstract

"Wir analysieren den Einfluss von Messfehlern in Mindestlohnevaluationen, wenn die Treatmentvariable, also der 'Bite', aus einer befragungsbasierten Lohnverteilung stammt. In Monte- Carlo-Simulationen überprüfen wir die Verzerrtheit der Schätzer sowohl mit simulierten als auch empirischen Verteilungen von Messfehlern. Die empirischen Messfehler stammen aus einem Link von Befragungsdaten und administrativen Daten. Auf der individuellen Beobachtungsebene werden die Treatmenteffekte über 30 Prozent unterschätzt. Eine Aggregation der Treatmentinformation auf der Ebene von Haushalten, Firmen oder Regionen löst das Problem nicht vollständig. In Fällen einer sehr stark segregierten Verteilung von betroffenen Beschäftigten auf nur wenige Firmen oder Regionen kann es sogar zu einer Überschätzung des wahren Effekts kommen. Wir diskutieren zwei Lösungsansätze: Die Verwendung einer kontinuierlichen Treatmentvariable und das Löschen von Observationen, die in der Lohnverteilung nahe der Mindestlohnschwelle liegen." (Autorenreferat, IAB-Doku)

Zitatform

Meitinger, Katharina, Sven Stadtmüller, Henning Silber, Roman Auriga, Michael Bergmann, Michael Blohm, Michaela Blumenberg, Pablo Christmann, Barbara Felderer, Corinna Frodermann, Florian Griese, Tobias Gummer, Achim Koch, Anita Kottwitz, Kristina Krell, Ulrich Krieger, Elisabeth Liebau, Silke Martin, André Müller-Kuller, Beatrice Rammstedt, Ines Schaurer, Annette Scherpenzeel, Claudia Schmiedeberg, Tobias Schmidt & Christian Schnaudt (2020): Fieldwork Monitoring in Practice: Insights from 17 Large-scale Social Science Surveys in Germany. In: Survey Methods: Insights from the Field H. 18.05.2020, S. 1-13., 2020-05-18. DOI:10.13094/SMIF-2020-00006

Abstract

"This study provides a synopsis of the current fieldwork monitoring practices of large-scale surveys in Germany. Based on the results of a standardized questionnaire, the study summarizes fieldwork monitoring indicators used and fieldwork measures carried out by 17 large-scale social sciences surveys in Germany. Our descriptive results reveal that a common set of fieldwork indicators and measures exist on which the studied surveys rely. However, it also uncovers the need for additional design-specific indicators. Finally, it underlines the importance of a close cooperation between survey representatives and fieldwork agencies to optimize processes in fieldwork monitoring in the German survey context. The article concludes with implications for fieldwork practice." (Author's abstract, IAB-Doku) ((en))

Zitatform

Müller, Bettina, Sebastian Bähr, Stefanie Gundert, Nils Teichler, Stefanie Unger & Claudia Wenzig (2020): PASS Scales and Instruments Manual. (FDZ-Methodenreport 07/2020 (en)), Nürnberg, 111 S. DOI:10.5164/IAB.FDZM.2007.de.v1

Abstract

"Dieses Handbuch enthält Informationen zu den Fragebogenmodulen und Skalen, die in den Wellen 1 bis 13 der PASS-Studie eingesetzt wurden. Insbesondere beschreibt es den theoretischen Hintergrund und die Entwicklung der einzelnen Module sowie den Wortlaut der Einzel- und Skalenitems. Alle Items sind in Deutsch, um den Originalwortlaut abzubilden und in Englisch, um die internationale Kommunikation zu unterstützen." (Autorenreferat, IAB-Doku)

Zitatform

West, Brady T., Michael R. Elliott, Zeina Mneimneh, James Wagner, Andy Peytchev & Mark Trappmann (2020): An examination of an interviewer-respondent matching protocol in a longitudinal CATI study. In: Journal of survey statistics and methodology, Jg. 8, H. 2, S. 304-324., 2018-12-19. DOI:10.1093/jssam/smy028

Abstract

"This article presents results from an experimental study in Germany designed to test the effectiveness of a novel protocol for matching participants in a national panel survey with interviewers employing computer-assisted telephone interviewing (CATI) on selected sociodemographic features, including sex, age, and education. We specifically focus on the ability of the protocol to engender close matches between respondents and interviewers in terms of these features, using both theory and empirical evidence to suggest that this type of matching will improve cooperation rates in surveys employing CATI. We also focus on indicators of 'success' at first contact (defined as a successful interview or establishment of an appointment for an interview) as a function of whether the matching protocol was in use on a given day and whether specific types of matches generated higher rates of success overall. We find strong evidence of the protocol effectively establishing close matches, and we also observe that matches based on education proved especially effective for rates of 'success' in a panel survey that focused primarily on labor market topics. We conclude with thoughts on practical implementation of this approach in other settings and suggested directions for future work in this area." (Author's abstract, IAB-Doku) ((en))

Zitatform

Jesske, Birgit, Sabine Schulz & Sylvia Quandt (2019): Panel Arbeitsmarkt und Soziale Sicherung PASS-Erhebungswelle 12 - 2018 (Haupterhebung). (FDZ-Methodenreport 05/2019 (de)), Nürnberg, 157 S. DOI:10.5164/IAB.FDZM.1905.de.v1

Zitatform

Sakshaug, Joseph & Manfred Antoni (2019): Evaluating the utility of indirectly linked federal administrative records for nonresponse bias adjustment. In: Journal of Survey Statistics and Methodology, Jg. 7, H. 2, S. 227-249., 2018-03-09. DOI:10.1093/jssam/smy009

Abstract

"Survey researchers are actively seeking powerful auxiliary data sources capable of correcting for possible nonresponse bias in survey estimates of the general population. While several auxiliary data options exist, concerns about their usefulness for addressing nonresponse bias remain. One underutilized - but potentially rich - source of auxiliary data for nonresponse bias adjustment is federal administrative records. While federal records are routinely used to study nonresponse in countries where it is possible to directly link them (via a unique identifier) to population-based samples, such records are not widely used for this purpose in countries which lack a unique identifier to facilitate direct linkage. In this article, we examine the utility of indirectly linked administrative data from a federal employment database for nonresponse bias adjustment in a general population survey in Germany. In short, we find that the linked administrative variables have stronger correlations with the substantive survey variables than do standard paradata variables and that incorporating linked administrative data in nonresponse weighting adjustments reduces relative nonresponse bias to a greater extent than paradata-only weighting adjustments. However, for the majority of weighted survey estimates, including the administrative variables in the weighting adjustment procedure has minimal impact on the point estimates and their variances. We conclude with a general discussion of these findings and comment on the logistical issues associated with this type of linkage relevant to survey practice." (Author's abstract, IAB-Doku) ((en))

Zitatform

West, Brady T. & Mark Trappmann (2019): Effective strategies for recording interviewer observations: evidence from the PASS Study in Germany. In: Survey Methods: Insights from the Field H. 22.10.2019, S. 1-9., 2019-10-22. DOI:10.13094/SMIF-2019-00021

Abstract

"This article investigates how different strategies used by interviewers when recording interviewer observations relate to observation accuracy. Before conducting interviews in a refreshment sample of the general population for the German PASS panel study, interviewers were asked to observe one key target variable of the study -- whether a household is at risk of poverty or not -- for all sampled households. In addition, interviewers recorded what strategies they had used to make their observations. For responding households, we assessed the accuracy of the observation by comparing it to an actual survey measure of poverty risk. Separate multilevel regression models attempting to explain the observed interviewer variance in observation accuracy for two types of households (those at risk and not at risk of poverty) using case-level strategies and aggregate interviewer tendencies reveal unique strategies that result in more accurate observations for each type of household. An aggregate fixed-effects model then reveals strategies that prove to be effective regardless of the type of household when accounting for unobserved interviewer heterogeneity." (Author's abstract, IAB-Doku) ((en))

Zitatform

Bähr, Sebastian, Georg-Christoph Haas, Florian Keusch, Frauke Kreuter & Mark Trappmann (2018): IAB-SMART-Studie: Mit dem Smartphone den Arbeitsmarkt erforschen. In: IAB-Forum H. 09.01.2018, o. Sz., 2018-01-04.

Abstract

"Smartphones sind mittlerweile für die meisten Menschen selbstverständlicher Bestandteil des Alltags. Erhebliche Teile der täglichen Kommunikation finden damit statt - das gilt nicht nur im Privaten, sondern auch im beruflichen Kontext. Auch Arbeitsplätze werden durch internetfähige Smartphones mehr und mehr mobil. Selbst bei der Jobsuche sind Smartphone und die Nutzung von Apps heute für viele nicht mehr wegzudenken. Für ein Forscherteam des Instituts für Arbeitsmarkt- und Berufsforschung (IAB) Anlass genug, eine neue Studie aufzusetzen, um die Möglichkeiten dieses Mediums für die wissenschaftliche Forschung auszuloten." (Autorenreferat, IAB-Doku)

Zitatform

Du, Shihan, Pia Homrighausen & Ralf A. Wilke (2018): On omitted variables, proxies and unobserved effects in analysis of administrative labour market data. (FDZ-Methodenreport 06/2018 (en)), Nürnberg, 38 S. DOI:10.5164/IAB.FDZM.1806.en.v1

Abstract

"Empirical research addresses omitted variable bias in regression analysis by means of various approaches. We present a framework that nests some of them and put it to German linked administrative labour market data. We find evidence for sizable omitted variable bias in a wage regression, while a labour market transition model appears to be less affected. Additional survey variables contribute only to the wage model, while the use of work history variables and panel models lead to changes in coefficients in the two models. Overall, unobserved effects panel data models with a restricted regressor set are found to control for more information than cross sectional analysis with an extended variable set." (Author's abstract, IAB-Doku) ((en))

Zitatform

Felderer, Barbara, Gerrit Müller, Frauke Kreuter & Joachim Winter (2018): The effect of differential incentives on attrition bias. Evidence from the PASS Wave 3 incentive experiment. In: Field Methods, Jg. 30, H. 1, S. 56-69., 2017-03-30. DOI:10.1177/1525822X17726206

Abstract

"Respondent incentives are widely used to increase response rates, but their effect on nonresponse bias has not been researched as much. To contribute to the research, we analyze an incentive experiment embedded within the third wave of the German household panel survey 'Panel Labor Market and Social Security' conducted by the German Institute for Employment Research. Our question is whether attrition bias differs in two incentive plans. In particular, we want to study whether an unconditional EURO10 cash incentive yields less attrition bias in self-reported labor income and other sociodemographics than a conditional lottery ticket incentive. We find that unconditional cash incentives are more effective than conditional lottery tickets in reducing attrition bias in income and several sociodemographic variables." (Author's abstract, IAB-Doku) ((en))

Zitatform

Gessendorfer, Jonathan, Jonas Beste, Jörg Drechsler & Joseph Sakshaug (2018): Statistical matching as a supplement to record linkage. A valuable method to tackle nonconsent bias? In: Journal of official statistics, Jg. 34, H. 4, S. 909-933., 2018-06-20. DOI:10.2478/jos-2018-0045

Abstract

"Record linkage has become an important tool for increasing research opportunities in the social sciences. Surveys that perform record linkage to administrative records are often required to obtain informed consent from respondents prior to linkage. A major concern is that nonconsent could introduce biases in analyses based on the linked data. One straightforward strategy to overcome the missing data problem created by nonconsent is to match nonconsenters with statistically similar units in the target administrative database. To assess the effectiveness of statistical matching in this context, we use data from two German panel surveys that have been linked to an administrative database of the German Federal Employment Agency. We evaluate the statistical matching procedure under various artificial nonconsent scenarios and show that the method can be effective in reducing nonconsent biases in marginal distributions, but that biases in multivariate estimates can sometimes be worsened. We discuss the implications of these findings for survey practice and elaborate on some of the practical challenges of implementing the statistical matching procedure in the context of linkage nonconsent. The developed simulation design can act as a roadmap for other statistical agencies considering the proposed approach for their data." (Author's abstract, IAB-Doku) ((en))

Zitatform

Jesske, Birgit & Sabine Schulz (2018): Methodenbericht Panel Arbeitsmarkt und Soziale Sicherung PASS. 11. Erhebungswelle - 2017 (Haupterhebung). (FDZ-Methodenreport 13/2018 (de)), Nürnberg, 160 S. DOI:10.5164/IAB.FDZM.1813.de.v1

Abstract

"Bereits in der letzten Erhebungswelle 10 hat PASS auf die Herausforderung reagiert, dass sich die Zusammensetzung der Zielgruppe der SGBII- Empfänger verändert hat. Ausgelöst durch die verstärkte Flüchtlingszuwanderung seit 2014 in Deutschland finden sich unter den Leistungsempfängern größere Anteile aus arabischsprachigen Herkunftsländern, die über die nächsten Jahre im PASS befragt werden sollen. Dafür wurden in Welle 10 neben dem Einsatz eines arabischen Erhebungsinstruments verschiedene Maßnahmen zur Kontaktierung und Interviewführung getroffen und weiterentwickelt, die in Welle 11 erneut zum Einsatz kamen. Während in Welle 10 ein Oversampling für Neuzugänge ins SGB II mit syrischer und irakischer Nationalität erfolgte, sind syrische/irakische Haushalte in der Auffrischungsstichprobe von Welle 11 auch ohne diese Maßnahme ausreichend vertreten. Die Erfahrungen aus Welle 10 haben gezeigt, dass sich Kontaktierung und Interviewführung aber auch Bearbeitungsergebnisse in dieser Gruppe noch deutlich von der üblichen SGB-II-Stichprobe unterscheiden. Vor dem Hintergrund werden im Methodenbericht Ergebnisse nach Stichprobengruppen getrennt ausgewiesen, so dass sowohl im Panel als auch für die Auffrischungsstichprobe syrische/irakische Haushalte immer eine eigene Gruppe innerhalb der SGB-II-Stichproben bilden.
Der vorliegende Methodenbericht für die Welle 11 beschreibt die Zusammensetzung der Stichprobe aus Bestands- und Auffrischungsadressen (Kapitel 3), die Befragungspersonen der Studie (Kapitel 2) und geht auf die Erhebungsinstrumente ein, die neben den Hauptinstrumenten für Haushalts- und Personen- bzw. Seniorenfragen auch einen Kontaktierungsfragebogen und eine Matrix zur Erfassung der Haushaltszusammensetzung umfassen (Kapitel 4). In Kapitel 5 erfolgt eine ausführliche Beschreibung der Durchführung der Erhebungen sowie eine Dokumentation der Feldergebnisse der Erhebungswelle 11 in Kapitel 6. Kapitel 7 dieses Methodenberichts enthält eine detaillierte Beschreibung über den eingesetzten Interviewerstab und die Qualitätssicherung während der Feldphase.
Der vorliegende Methodenbericht enthält alle Schritte der Haupterhebung der Welle 11. Der Haupterhebung war ein gesonderter Pretest vorgeschaltet. Die Arbeiten und Ergebnisse dieses Pretests sind in einem Pretestbericht gesondert dokumentiert." (Autorenreferat, IAB-Doku)

Zitatform

Speidel, Matthias, Jörg Drechsler & Shahab Jolani (2018): R package hmi: a convenient tool for hierarchical multiple imputation and beyond. (IAB-Discussion Paper 16/2018), Nürnberg, 55 S.

Abstract

"Anwendungen von Multipler Imputation sind längst über den klassischen Kontext der Behandlung von fehlenden Beobachtungen in Querschnittsstudien herausgewachsen. Heutzutage wird Multiple Imputation auch verwendet um fehlenden Werten in hierarchischen Datensätzen zu imputieren, um Vertraulichkeits-Interessen zu begegnen, um Datensätze aus verschiedenen Quellen zu kombinieren oder um Messfehler aus Erhebungen zu korrigieren. Die meiste Imputationssoftware kann allerdings nur mit fehlenden Beobachtungen in Querschnittsdaten umgehen und Erweiterungen für hierarchische Daten - sofern überhaupt vorhanden - sind typischerweise in ihrem Umfang begrenzt. Unserem Kenntnisstand nach, ist aktuell keine Software für den Umgang mit Messfehlern, basierend auf Multiplen Imputationsmethoden, vorhanden. Das R-Packet hmi versucht einige dieser Lücken zu schließen. Es bietet Multiple Imputationsroutinen in hierarchischen Settings für viele Variablentypen (zum Beispiel nominal, ordinal oder stetige Variablen). Zudem stellt es Imputationsmethoden für Intervalldaten bereit und behandelt ein übliches Messfehlerproblem in Befragungsdaten: Verzerrungen aufgrund impliziten Rundens der berichteten Werte. Der nutzerfreundliche Aufbau, der nur die Daten und optional eine Spezifizierung des Analysemodels benötigt, macht das Paket besonders attraktiv für Nutzer die weniger vertraut mit den Besonderheiten von Multipler Imputation sind. Die Kompatibilität mit dem populären Paket mice stellt sicher, dass der reichhaltige Satz an Analyse- und Diagnosewerkzeugen, und Befehlen für das Imputationsergebnis aus mice, einfach angewandt werden kann, sobald die Daten imputiert wurden." (Autorenreferat, IAB-Doku)

Zitatform

Bach, Ruben L. & Stephanie Eckman (2017): Does participating in a panel survey change respondents' labor market behavior? (IAB-Discussion Paper 15/2017), Nürnberg, 31 S.

Abstract

"Die wiederholte Teilnahme an Längsschnittstudien kann zu unbeabsichtigten Verhaltensänderungen und/oder Änderungen im Antwortverhalten der Teilnehmer führen. Um solchen Verhaltensänderungen nachzugehen, haben wir Umfragedaten der Längsschnittstudie PASS mit administrativen Daten verknüpft und schätzen mittels Instrumentenvariablen den kausalen Effekt der wiederholten Umfrageteilnahme auf die Teilnahme an Maßnahmen der aktiven Arbeitsmarktpolitik. Die Ergebnisse deuten darauf hin, dass Umfrageteilnehmer aufgrund der (mehrmaligen) Teilnahme an der Befragung an weniger Maßnahmen der aktiven Arbeitsmarktpolitik teilnehmen. Diese Resultate verdeutlichen, dass die wiederholte Teilnahme an Längsschnittbefragungen sich nicht nur auf das Antwortverhalten der Teilnehmer auswirken kann, sondern auch auf deren tatsächliches Verhalten." (Autorenreferat, IAB-Doku)

Zitatform

Jesske, Birgit, Petra Knerr & Lisa Kraft (2017): Methodenbericht Panel Arbeitsmarkt und Soziale Sicherung PASS. 10. Erhebungswelle - 2016 (Haupterhebung). (FDZ-Methodenreport 09/2017 (de)), Nürnberg, 160 S.

Abstract

"Der vorliegende Methodenbericht für die Welle 10 beschreibt die Zusammensetzung der Stichprobe aus Bestands- und Auffrischungsadressen (Kapitel 3), die Befragungspersonen der Studie (Kapitel 2) und geht auf die Erhebungsinstrumente ein, die neben den Hauptinstrumenten für Haushalts- und Personen- bzw. Seniorenfragen auch einen Kontaktierungsfragebogen und eine Matrix zur Erfassung der Haushaltszusammensetzung umfassen (Kapitel 4). In Kapitel 5 erfolgt eine ausführliche Beschreibung der Durchführung der Erhebungen sowie eine Dokumentation der Feldergebnisse der Erhebungswelle 10 in Kapitel 6. Kapitel 7 dieses Methodenberichts enthält eine detaillierte Beschreibung über den eingesetzten Interviewerstab und die Qualitätssicherung während der Feldphase. Die Durchführung der Erhebungen in der Zugangsstichprobe Syrer/Iraker unterlag teilweise besonderen Bedingungen. Um den besonderen Erhebungsbedingungen dieser Gruppe gerecht zu werden, erfolgt in einzelnen Kapiteln eine Darstellung getrennt für Haushalte der üblichen Zugangsstichprobe und der syrischen/irakischen Haushalte. Das betrifft beim Erhebungsinstrument die Kapitel 4.7.1 und 4.8.2, bei der Felddurchführung die Kapitel 5.3.1.2 und 5.4.4, bei den Ergebnissen der Haupterhebung das Kapitel 6.9 sowie beim Interviewereinsatz das Kapitel 7.6.
Der vorliegende Methodenbericht enthält alle Schritte der Haupterhebung der Welle 10. Der Haupterhebung war ein gesonderter Pretest vorgeschaltet. Die Arbeiten und Ergebnisse dieses Pretests sind in einem Pretestbericht gesondert dokumentiert.
Das IAB hat infas im Herbst 2009 mit der Durchführung von PASS ab der vierten Erhebungswelle beauftragt. Neben der Durchführung der Felderhebungen hat das IAB infas mit der Datenaufbereitung und der Gewichtung beauftragt. Die weiteren Schritte für Datenaufbereitung und Gewichtung der Welle 10 werden im wellenspezifischen Datenreport ausführlich beschrieben und dokumentiert.
Alle verwendeten Erhebungsmaterialien werden im gesonderten Anhang dokumentiert." (Textauszug, IAB-Doku)

Zitatform

Bähr, Sebastian, Jonas Beste, Stefanie Gundert, Lukas Kerschbaumer, Ivonne Küsters, Mark Trappmann, Stefanie Unger & Claudia Wenzig (2017): Einblicke: 10 Jahre Studie "Lebensqualität und soziale Sicherung". Nürnberg, 48 S.

Abstract

Die bundesweite Studie "Lebensqualität und soziale Sicherung" gehört mit jährlich 15.000 Studienteilnehmern zu den größten Längsschnittbefragungen Europas und stellt für Fragen zum deutschen Arbeitsmarkt und Sozialstaat eine der wichtigsten Informationsquellen für die Sozial- und Wirtschaftswissenschaften dar. Sie eignet sich insbesondere zur Untersuchung des Umbaus des deutschen Sozialsystems infolge der sogenannten Hartz-Reformen. Die Broschüre informiert anläßlich des 10-jährigen Bestehens über die Themen der Studie und fasst ausgewählte Forschungsergebnisse zusammen. (IAB)

Zitatform

Plass, Julia, Marco E. G. V. Cattaneo, Georg Schollmeyer & Thomas Augustin (2017): Testing of coarsening mechanisms: Coarsening at random versus subgroup independence. In: M. B. Ferraro, P. Giordani, B. Vantaggi, M. Gagolewski, M. Ángeles Gil, P. Grzegorzewski & O. Hryniewicz (Hrsg.) (2017): Soft methods for data science (Advances in Intelligent Systems and Computing, 456), S. 415-422. DOI:10.1007/978-3-319-42972-4_51

Abstract

"Since coarse(ned) data naturally induce set-valued estimators, analysts often assume coarsening at random (CAR) to force them to be single-valued. Using the PASS data as an example, we re-illustrate the impossibility to test CAR and contrast it to another type of uninformative coarsening called subgroup independence (SI). It turns out that SI is testable." (Author's abstract, IAB-Doku) ((en))

Zitatform

Plass, J., M. Cattaneo, G. Schollmeyer & T. Augustin (2017): On the testability of coarsening assumptions. A hypothesis test for subgroup independence. In: International Journal of Approximate Reasoning, Jg. 90, H. November, S. 292-306. DOI:10.1016/j.ijar.2017.07.014

Zitatform

Plass, Julia, Marco Cattaneo, Thomas Augustin, Georg Schollmeyer & Christian Heumann (2017): Towards a reliable categorical regression analysis for non-randomly coarsened observations. An analysis with German labour market data. (Department of Statistics: Technical Reports 206), München, 26 S.

Abstract

"In most surveys, one is confronted with missing or, more generally, coarse data. Many methods dealing with these data make strong, untestable assumptions, e.g. coarsening at random. But due to the potentially resulting severe bias, interest increases in approaches that only include tenable knowledge about the coarsening process, leading to imprecise, but credible results. We elaborate such cautious methods for regression analysis with a coarse categorical dependent variable and precisely observed categorical covariates. Our cautious results from the German panel study 'Labour market and social security'' illustrate that traditional methods may even pretend specific signs of the regression estimates." (Author's abstract, IAB-Doku) ((en))

Zitatform

Sakshaug, Joseph, Manfred Antoni & Reinhard Sauckel (2017): The quality and selectivity of linking federal administrative records to respondents and nonrespondents in a general population survey in Germany. In: Survey research methods, Jg. 11, H. 1, S. 63-80., 2016-09-29. DOI:10.18148/srm/2017.v11i1.6718

Abstract

"Various forms of auxiliary information are being sought to augment survey samples and adjust for possible nonresponse bias in key survey estimates. Auxiliary data options are typically limited in most general population surveys and there are questions concerning their utility for nonresponse bias evaluation and adjustment. Federal administrative databases provide a potentially rich source of auxiliary information for nonresponse purposes, but linking them to general population samples is usually restricted to surveys which draw their samples from population registers containing unique personal identity numbers which can be directly linked to federal databases containing more detailed substantive information. In this article, we examine the quality and selectivity of augmenting a federal administrative database to a general population survey when such a unique personal identifier is not available. We employ a series of standard linkage procedures that rely instead on non-unique and error-prone identifiers collected from the sampling frame to link a federal employment database to a general population survey in Germany. The quality and selectivity of the established links are evaluated using household- and person-level interview data in accordance with German data protection laws. We report a linkage rate of 60 percent for the entire sample under a strict linkage criterion, and 80 percent under a more relaxed criterion. We find that linkage rates vary across some household- and person-level characteristics that are likely specific to the particular administrative database used in this case study. We conclude with a general discussion of the practical implications of this work for survey organizations considering performing similar linkages and highlight some opportunities for future research." (Author's abstract, IAB-Doku) ((en))

Zitatform

Drechsler, Jörg & Hans Kiesl (2016): Beat the heap: An imputation strategy for valid inferences from rounded income data. In: Journal of Survey Statistics and Methodology, Jg. 4, H. 1, S. 22-42., 2015-08-29. DOI:10.1093/jssam/smv032

Abstract

"Befragungen zu Einkommensverhältnissen sind typischerweise von zwei Fehlerquellen betroffen, die zu Verzerrungen führen können, wenn sie bei der Analyse nicht berücksichtigt werden: Auf der einen Seite gilt das Einkommen als sensible Information und die Antwortraten zum Einkommen liegen in der Regel niedriger als Antwortraten bei anderen nicht sensiblen Fragen. Auf der anderen Seiten können sich die Befragten in aller Regel nicht genau an ihr exaktes Einkommen erinnern und geben daher einen gerundeten Wert an. Die negativen Auswirkungen des Antwortausfalls sind bereits gründlich untersucht worden und die meisten datenbereitstellenden Institutionen haben bereits Imputationsmethoden implementiert um möglichen Verzerrungen durch den Ausfall entegegenzuwirken. Im Gegensatz dazu werden die Auswirkungen des Rundens nach unserer Kenntnis bisher in der Praxis weitestgehend vernachlässigt, obwohl etliche Studien deutlich gezeigt haben, dass die meisten Befragten Ihrer Einkommensangaben runden. In diesem Papier veranschaulichen wir den starken Einfluss, den dieses Runden auf wichtige Kennziffern wie die Armutsquote haben kann. Um unverzerrte Schätzergebnisse zu erhalten, stellen wir ein zweistufiges Imputationsverfahren vor, bei dem in einem ersten Schritt gegeben das beobachtete Einkommen die a posteriori Wahrscheinlichkeit zu Runden geschätzt wird. In einem zweiten Schritt wird dann das tatsächliche Einkommen unter den bestimmten Rundungswahrscheinlichkeiten imputiert. Anhand einer Simulationsstudie illustrieren wir, dass es mit diesem Verfahren möglich ist, unverzerrte Schätzergebnisse zu gewinnen. Darüber hinaus präsentieren wir Ergebnisse auf Basis der IAB Längsschnittstudie 'Panel Arbeitsmarkt und Soziale Sicherung (PASS)'." (Autorenreferat, IAB-Doku)

Zitatform

Eggs, Johannes (2016): Patterns and impact of longitudinal measurement error for welfare receipt. (IAB-Bibliothek 362), Bielefeld: Bertelsmann, 136 S. DOI:10.3278/300923w

Abstract

"Diese Arbeit beschäftigt sich mit Messfehlern in Längsschnittdaten. Messfehler können in besonderem Maße die Messung von Übergängen und Veränderungen über die Zeit beeinflussen. Die Messung von Veränderungen ist jedoch einer der Hauptgründe für das Erheben von Längsschnittdaten. Allerdings werden Messfehler in Längsschnittdaten selten analysiert.
Durch die Verknüpfung von Paneldaten mit Registerdaten auf der individuellen Ebene werden in dieser Arbeit Messfehler für den Bezug von Arbeitslosengeld II für fünf aufeinanderfolgende Panelwellen untersucht. Dabei zeigt sich, dass die Messfehler für den Bezug nicht zufällig verteilt sind, sondern mit der Zeit und persönlichen Charakteristiken korrelieren." (Autorenreferat, IAB-Doku)

Zitatform

Jesske, Birgit, Petra Knerr & Sabine Schulz (2016): Methodenbericht Panel Arbeitsmarkt und Soziale Sicherung PASS. 9. Erhebungswelle - 2015 (Haupterhebung). (FDZ-Methodenreport 04/2016 (de)), Nürnberg, 148 S.

Abstract

"Das IAB hat infas im Herbst 2009 mit der Durchführung von PASS ab der vierten Erhebungswelle beauftragt. Der vorliegende Methodenbericht für die Welle 9 beschreibt die Zusammensetzung der Stichprobe aus Bestands- und Auffrischungsadressen (Kapitel 3), die Befragungspersonen der Studie (Kapitel 2) und geht auf die Erhebungsinstrumente ein, die neben den Hauptinstrumenten für Haushalts- und Personen- bzw. Seniorenfragen auch einen Kontaktierungsfragebogen und eine Matrix zur Erfassung der Haushaltszusammensetzung umfassen (Kapitel 4). In Kapitel 5 erfolgt eine ausführliche Beschreibung der Durchführung der Erhebungen sowie eine Dokumentation der Feldergebnisse der Erhebungswelle 9 in Kapitel 6. Kapitel 7 dieses Methodenberichts enthält eine detaillierte Beschreibung über den eingesetzten Interviewerstab und die Qualitätssicherung während der Feldphase.
Der vorliegende Methodenbericht enthält alle Schritte der Haupterhebung der Welle 9. Der Haupterhebung war ein gesonderter Pretest vorgeschaltet. Die Arbeiten und Ergebnisse dieses Pretests sind in einem Pretestbericht gesondert dokumentiert.
Neben der Durchführung der Felderhebungen hat das IAB infas mit der Datenaufbereitung und der Gewichtung beauftragt. Die weiteren Schritte für Datenaufbereitung und Gewichtung der Welle 9 werden im wellenspezifischen Datenreport ausführlich beschrieben und dokumentiert." (Autorenreferat, IAB-Doku)

Zitatform

Josten, Michael & Mark Trappmann (2016): Interviewer effects on a network size filter question. In: Journal of official statistics, Jg. 32, H. 2, S. 349-373., 2015-09-08. DOI:10.1515/jos-2016-0020

Abstract

"There is evidence that survey interviewers may be tempted to manipulate answers to filter questions in a way that minimizes the number of follow-up questions. This becomes relevant when ego-centered network data are collected. The reported network size has a huge impact on interview duration if multiple questions on each alter are triggered. We analyze interviewer effects on a network-size question in the mixed-mode survey 'Panel Study 'Labour Market and Social Security'' (PASS), where interviewers could skip up to 15 follow-up questions by generating small networks. Applying multilevel models, we find almost no interviewer effects in CATI mode, where interviewers are paid by the hour and frequently supervised. In CAPI, however, where interviewers are paid by case and no close supervision is possible, we find strong interviewer effects on network size. As the area-specific network size is known from telephone mode, where allocation to interviewers is random, interviewer and area effects can be separated. Furthermore, a difference-in-difference analysis reveals the negative effect of introducing the follow-up questions in Wave 3 on CAPI network size. Attempting to explain interviewer effects we neither find significant main effects of experience within a wave, nor significantly different slopes between interviewers." (Author's abstract, IAB-Doku) ((en))

Zitatform

Bethmann, Arne & Maren Klawitter (2015): PASS Quick Start File. Spellinformationen im Querschnitt. (FDZ-Methodenreport 04/2015 (de)), Nürnberg, 23 S.

Abstract

"Der vorliegende FDZ-Methodenreport soll Nutzern des Panels 'Arbeitsmarkt und soziale Sicherung' (PASS) anhand eines Beispiels zeigen, wie Informationen aus den PASS-Spelldaten einer Welle zugeordnet und an die PASS-Querschnittdatensätze angespielt werden können." (Autorenreferat, IAB-Doku)

Zitatform

Bruckmeier, Kerstin, Gerrit Müller & Regina T. Riphahn (2015): Survey misreporting of welfare receipt. Respondent, interviewer, and interview characteristics. In: Economics Letters, Jg. 129, H. April, S. 103-107., 2015-02-05. DOI:10.1016/j.econlet.2015.02.006

Abstract

"We use matched survey and administrative data to study interviewer and interview related determinants of misreporting on welfare receipt in interviews. In our data, 12.2 % of German welfare recipients underreport benefit receipt. We find that underreporting is more likely in formal and standardized interviews compared to those with a more conversational character. Further, low interviewer education and matched interviewer - respondent characteristics with respect to immigration and education are associated with higher reporting quality." (Author's abstract, IAB-Doku) ((en))

Zitatform

Drechsler, Jörg, Hans Kiesl & Matthias Speidel (2015): MI double feature: Multiple imputation to address nonresponse and rounding errors in income questions. In: Austrian Journal of Statistics, Jg. 44, H. 2, S. 59-71., 2014-11-21. DOI:10.17713/ajs.v44i2.77

Abstract

"Obtaining reliable income information in surveys is difficult for two reasons. On the one hand, many survey respondents consider income to be sensitive information and thus are reluctant to answer questions regarding their income. If those survey participants that do not provide information on their income are systematically different from the respondents (and there is ample of research indicating that they are) results based only on the observed income values will be misleading. On the other hand, respondents tend to round their income. Especially this second source of error is usually ignored when analyzing the income information. In a recent paper, Drechsler and Kiesl (2014) illustrated that inferences based on the collected information can be biased if the rounding is ignored and suggested a multiple imputation strategy to account for the rounding in reported income. In this paper we extend their approach to also address the nonresponse problem. We illustrate the approach using the household income variable from the German panel study 'Labor Market and Social Security'." (Author's abstract, IAB-Doku) ((en))

Zitatform

Eggs, Johannes & Annette Jäckle (2015): Dependent interviewing and sub-optimal responding. In: Survey research methods, Jg. 9, H. 1, S. 15-29., 2015-02-16. DOI:10.18148/srm/2015.v9i1.5860

Abstract

"With proactive dependent interviewing respondents are reminded of the answer they gave in the previous interview, before being asked about their current status. We examine the risk that respondents falsely confirm the answers from the previous interview as still applying, using data from a panel survey in which preload data about receipt of welfare benefit contained errors. A large proportion of respondents confirmed the false preload. Respondents with a more complex history of receipt, according to linked administrative records, were more likely to confirm. Personality also seemed to matter. Predictors of satisficing and characteristics of the survey and interviewer were not predictive of confirming the false preload." (Author's abstract, IAB-Doku) ((en))

Zitatform

Fuchs, Benjamin, Sarah Lödel & Michael Otto (2015): Quick start file for the panel "Labour market and social security" (PASS). Analysing the PASS data using SPSS/PASW. (FDZ-Methodenreport 08/2015 (en)), Nürnberg, 39 S.

Abstract

This FDZ-Methodenreport is meant to help users of SPSS/PASW handling the data of the Panel Study "Labour Market and Social Security" (PASS). It uses practical examples as can be found in the User Guide of PASS (Bethmann/Fuchs/Wurdack, 2013: Part II), which was written with a focus on STATA users. Therefore, it draws heavily on the work of Gebhardt/Bethmann (2013a), Gebhardt/Bethmann (2013b), Gebhardt/Bethmann (2013c) and Trappmann (2013).

Zitatform

Jesske, Birgit & Sabine Schulz (2015): Methodenbericht Panel Arbeitsmarkt und Soziale Sicherung PASS. 8. Erhebungswelle - 2014 (Haupterhebung). (FDZ-Methodenreport 11/2015 (de)), Nürnberg, 115 S.

Abstract

"Der vorliegende Methodenbericht für die Welle 8 beschreibt die Zusammensetzung der Stichprobe aus Bestands- und Auffrischungsadressen (Kapitel 3), die Befragungspersonen der Studie (Kapitel 2) und geht auf die Erhebungsinstrumente ein, die neben den Hauptinstrumenten für Haushalts- und Personen- bzw. Seniorenfragen auch einen Kontaktierungsfragebogen und eine Matrix zur Erfassung der Haushaltszusammensetzung umfassen (Kapitel 4).
In Kapitel 5 erfolgt eine ausführliche Beschreibung der Durchführung der Erhebungen sowie eine Dokumentation der Feldergebnisse der Erhebungswelle 8 in Kapitel 6. Kapitel 7 dieses Methodenberichts enthält eine detaillierte Beschreibung über den eingesetzten Interviewerstab und die Qualitätssicherung während der Feldphase.
Der vorliegende Methodenbericht enthält alle Schritte der Haupterhebung der Welle 8. Der Haupterhebung war ein gesonderter Pretest vorgeschaltet. Die Arbeiten und Ergebnisse dieses Pretests sind in einem Pretestbericht gesondert dokumentiert.
Neben der Durchführung der Felderhebungen hat das IAB infas mit der Datenaufbereitung und der Gewichtung beauftragt. Die weiteren Schritte für Datenaufbereitung und Gewichtung der Welle 8 werden im wellenspezifischen Datenreport ausführlich beschrieben und dokumentiert. Alle verwendeten Erhebungsmaterialien werden im gesonderten Anhang dokumentiert." (Autorenreferat, IAB-Doku)

Zitatform

Kosyakova, Yuliya, Jan Skopek & Stephanie Eckman (2015): Do interviewers manipulate responses to filter questions? Evidence from a multilevel approach. In: International Journal of Public Opinion Research, Jg. 27, H. 3, S. 417-431., 2014-06-09. DOI:10.1093/ijpor/edu027

Abstract

"This study provides a theoretically guided analysis of how interviewers might manipulate responses to filter questions ('triggering rate') in interview surveys. Drawing on principal-agent theory, we particularly examined how triggering rate varies by survey mode and across the interviewer's experience. Using data from a German survey and multilevel models, we find that interviewers do influence filter questions. Most intriguingly, there is an interaction between mode and experience: with increasing experience interviewers in CATI mode (higher monitoring and hourly payment) tend to collect more positive answers to the filter questions, while interviewers in CAPI mode (lower monitoring and case-based payment) tend to collect fewer. Our results suggest that manipulative interview behavior regarding questionnaire filtering exists and varies across incentive structures." (Author's abstract, IAB-Doku) ((en))

Zitatform

Kreuter, Frauke & Gerrit Müller (2015): A note on improving process efficiency in panel surveys with paradata. In: Field Methods, Jg. 27, H. 1, S. 55-65., 2013-04-16. DOI:10.1177/1525822X14538205

Abstract

"Call scheduling is a challenge for surveys around the world. Unlike cross-sectional surveys, panel surveys are in the position to use information from prior waves to enhance call scheduling algorithms. Past observational studies showed the benefit of calling panel cases at times that had been successful in the past. This paper is the first to experimentally assign panel cases to previously beneficial call windows. The results from a large scale national survey in Germany show modest efficiency gains measured in number of call attempts needed until first contact, but no gains in efficiency to gain cooperation." (Author's abstract, IAB-Doku) ((en))

Zitatform

Pforr, Klaus, Michael Blohm, Annelies G. Blom, Barbara Erdel, Barbara Felderer, Mathis Fräßdorf, Kristin Hajek, Susanne Helmschrott, Corinna Kleinert, Achim Koch, Ulrich Krieger, Martin Kroh, Silke Martin, Denise Saßenroth, Claudia Schmiedeberg, Eva-Maria Trüdinger & Beatrice Rammstedt (2015): Are incentive effects on response rates and nonresponse bias in large-scale, face-to-face surveys generalizable to Germany? Evidence from ten experiments. In: Public Opinion Quarterly, Jg. 79, H. 3, S. 740-768., 2014-09-10. DOI:10.1093/poq/nfv014

Abstract

"In survey research, a consensus has grown regarding the effectiveness of incentives encouraging survey participation across different survey modes and target populations. Most of this research has been based on surveys from the United States, whereas few studies have provided evidence that these results can be generalized to other contexts. This paper is the first to present comprehensive information concerning the effects of incentives on response rates and nonresponse bias across large-scale surveys in Germany. The context could be viewed as a critical test for incentive effects because Germany's population is among the most survey-critical in the world, with very low response rates. Our results suggest positive incentive effects on response rates and patterns of effects that are similar to those in previous research: The effect increased with the monetary value of the incentive; cash incentives affected response propensity more strongly than lottery tickets do; and prepaid incentives could be more cost effective than conditional incentives. We found mixed results for the effects of incentives on nonresponse bias. Regarding large-scale panel surveys, we could not unequivocally confirm that incentives increased response rates in later panel waves." (Author's abstract, IAB-Doku) ((en))

Zitatform

Plass, Julia, Thomas Augustin, Marco E. G. V. Cattaneo & Georg Schollmeyer (2015): Statistical modelling under epistemic data imprecision. Some results on estimating multinomial distributions and logistic regression for coarse categorical data. In: T. Augustin, S. Doria, E. Miranda & E. Quaeghebeur (Hrsg.) (2015): ISIPTA ¿15 Proceedings of the 9th International Symposium on Imprecise Probability : Theories and Applications, S. 247-256.

Abstract

"The paper deals with parameter estimation for categorical data under epistemic data imprecision, where for a part of the data only coarse(ned) versions of the true values are observable. For different observation models formalizing the information available on the coarsening process, we derive the (typically set-valued) maximum likelihood estimators of the underlying distributions. We discuss the homogeneous case of independent and identically distributed variables as well as logistic regression under a categorical covariate. We start with the imprecise point estimator under an observation model describing the coarsening process without any further assumptions. Then we determine several sensitivity parameters that allow the refinement of the estimators in the presence of auxiliary information." (Author's abstract, IAB-Doku) ((en))

Zitatform

Sakshaug, Joseph, Stefanie Wolter & Frauke Kreuter (2015): Obtaining record linkage consent. Results from a wording experiment in Germany. In: Survey Methods: Insights from the Field H. 01.11.2015, S. 1-12., 2015-11-13. DOI:10.13094/SMIF-2015-00012

Abstract

"Many sample surveys ask respondents for consent to link their survey information with administrative sources. There is significant variation in how linkage requests are administered and little experimental evidence to suggest which approaches are useful for achieving high consent rates. A common approach is to emphasize the positive benefits of linkage to respondents. However, some evidence suggests that emphasizing the negative consequences of not consenting to linkage is a more effective strategy. To further examine this issue, we conducted a gain-loss framing experiment in which we emphasized the benefit (gain) of linking or the negative consequence (loss) of not linking one's data as it related to the usefulness of their survey responses. In addition, we explored a sunk-prospective costs rationale by varying the emphasis on response usefulness for responses that the respondent had already provided prior to the linkage request (sunk costs) and responses that would be provided after the linkage request (prospective costs). We found a significant interaction between gain-loss framing and the sunk-prospective costs rationale: respondents in the gain-framing condition consented to linkage at a higher rate than those in the loss-framing condition when response usefulness was emphasized for responses to subsequent survey items. Conversely, the opposite pattern was observed when response usefulness was emphasized for responses that had already been provided: loss-framing resulted in a higher consent rate than the gain-framing, but this result did not reach statistical significance." (Author's abstract, IAB-Doku) ((en))

Zitatform

Trappmann, Mark, Tobias Gramlich & Alexander Mosthaf (2015): The effect of events between waves on panel attrition. In: Survey research methods, Jg. 9, H. 1, S. 31-43., 2014-11-28. DOI:10.18148/srm/2015.v9i1.5849

Abstract

"Panel surveys suffer from attrition. Most panel studies use propensity models or weighting class approaches to correct for non-random dropout. These models draw on variables measured in a previous wave or from paradata of the study. While it is plausible that they affect contactability and cooperativeness, panel studies usually cannot assess the impact of events between waves on attrition. The amount of change in the population could be seriously underestimated if such events had an effect on participation in subsequent waves. The panel study PASS is a novel dataset for labour market and poverty research. In PASS, survey data on (un)employment histories, income and education of participants are linked to corresponding data from respondents' administrative records. Thus, change can be observed for attritors as well as for continued participants. These data are used to show that change in household composition, employment status or receipt of benefits has an influence on contact and cooperation rates in the following wave. A large part of the effect is due to lower contactability of households who moved. Nevertheless, this effect can lead to biased estimates for the amount of change. After applying the survey's longitudinal weights this bias is reduced, but not entirely eliminated." (Author's abstract, IAB-Doku) ((en))

Zitatform

Bruckmeier, Kerstin, Gerrit Müller & Regina T. Riphahn (2014): Who misreports welfare receipt in surveys? In: Applied Economics Letters, Jg. 21, H. 12, S. 812-816., 2013-12-16. DOI:10.1080/13504851.2013.877566

Abstract

We match survey and administrative data and determine the extent of misreporting on welfare receipt. In our data, 10.5 percent of German welfare recipients underreport and 1 percent overreport benefit receipt. The analysis shows that particularly households who are close to the labor market, without children, and with relatively high household incomes and savings are prone to underreport their welfare receipt. This information is important for the study of transfer programs based on survey data.

Zitatform

Drechsler, Jörg & Hans Kiesl (2014): Beat the heap - an imputation strategy for valid inferences from rounded income data. (IAB-Discussion Paper 02/2014), Nürnberg, 26 S.

Abstract

"Befragungen zu Einkommensverhältnissen sind typischerweise von zwei Fehlerquellen betroffen, die zu Verzerrungen führen können, wenn sie bei der Analyse nicht berücksichtigt werden: Auf der einen Seite gilt das Einkommen als sensible Information und die Antwortraten zum Einkommen liegen in der Regel niedriger als Antwortraten bei anderen nicht sensiblen Fragen. Auf der anderen Seiten können sich die Befragten in aller Regel nicht genau an ihr exaktes Einkommen erinnern und geben daher einen gerundeten Wert an. Die negativen Auswirkungen des Antwortausfalls sind bereits gründlich untersucht worden und die meisten datenbereitstellenden Institutionen haben bereits Imputationsmethoden implementiert um möglichen Verzerrungen durch den Ausfall entegegenzuwirken. Im Gegensatz dazu werden die Auswirkungen des Rundens nach unserer Kenntnis bisher in der Praxis weitestgehend vernachlässigt, obwohl etliche Studien deutlich gezeigt haben, dass die meisten Befragten Ihrer Einkommensangaben runden. In diesem Papier veranschaulichen wir den starken Einfluss, den dieses Runden auf wichtige Kennziffern wie die Armutsquote haben kann. Um unverzerrte Schätzergebnisse zu erhalten, stellen wir ein zweistufiges Imputationsverfahren vor, bei dem in einem ersten Schritt gegeben das beobachtete Einkommen die a posteriori Wahrscheinlichkeit zu Runden geschätzt wird. In einem zweiten Schritt wird dann das tatsächliche Einkommen unter den bestimmten Rundungswahrscheinlichkeiten imputiert. Anhand einer Simulationsstudie illustrieren wir, dass es mit diesem Verfahren möglich ist, unverzerrte Schätzergebnisse zu gewinnen. Darüber hinaus präsentieren wir Ergebnisse auf Basis der IAB Längsschnittstudie 'Panel Arbeitsmarkt und Soziale Sicherung (PASS)'." (Autorenreferat, IAB-Doku)