혼합조사의 모드효과 추정: 선택효과와 측정효과의 분리방법
Estimating the Mode-Effect in Mixed Mode Surveys: Disentangling Method of Selection and Measurement Effects
0
조회
0
다운로드
2
인용
0
참고문헌
키워드
초록
본 연구는 웹조사와 면접조사의 순차적 혼합조사 방식에서 조사방법 간 결과차이인 모드효과를 파악하려는 목적으로 시행됐다. 모드효과는 조사방법을 선택한 표본 차이인 선택효과와 조사방법 간 순수한 결과 차이인 측정효과로 분리될 수 있 다 . 이를 위해 혼합조사방법의 표본과 동질적인 단일 면접조사방법의 비교표본을 설정하고 Vannieuwenhuyze와 Looseveldt(2012)가 소개한 Extended MM Comparison 방식을 적용했다. 가족, 안전, 노동, 소득과 소비 관련 61개 문항을 분석한 결과 선택효과는 대부분 유의하지 않았고, 측정효과가 p<.05 수준에서 유의한 문항은 31개였다. 대체로 웹조사에서 바람직하지 않은 행동을 더 노출하며, 사회 비판적 시각을 나타내는 반면 면접조사는 바람직한 응답, 보통, 변화 없음을 응답하는 경향이 있었다. 이러한 결과에 따라 혼합조사를 시행하는 경우 모드효과의 발생, 무응답오차, 비용, 조사 주제의 선택에 관한 논의를 전개했다.
Abstract
The purpose of this study is to investigate the mode effect, which is the difference in results between the two survey methods in sequential mixed-mode survey, the web survey and the face-to-face interview survey. The mode effect can be separated into the selection effect, the difference in sample by their selection of survey method, and the measurement effect, the result solely due to the differences in methods. For this purpose, we set up a comparison group of homogeneous face-to-face survey method, together with the sample of mixed-mode survey and applied the Extended MM Comparison method from Vannieuwenhuyze and Looseveldt (2012). In the analysis of 61 items related to family, safety, labor, income and consumption, the selection effect was mostly insignificant, but the measurement effect was shown significance in 31 items (p < .05). In general, web surveys tend to reveal more undesirable behaviors and show more critical views on social issues, whereas face-to-face interviews tend to show more favorable attitude and are more likely to choose neutral or no change. Based on the results, we discussed the occurrence of mode effects, non-response errors, costs, and selection of survey subjects when conducting the mixed mode surveys.
참고문헌 (13)
- 박시내, "경제활동인구조사의 자료수집방법별 효과 분석: 응답자의 자료수집방법 선택효과를 중심으로", 조사연구, 15(1), pp.73~92 (2014), 한국조사연구학회
- 혼합조사 추정방법 실무적용방안 검토, "임경은", 통계개발원, ~, pp.2013년 하반기 연구 보고서 제Ⅲ권 (2013)
- 2010년 인구주택총조사 면접․인터넷 조사특성 분석, "황양주", 통계개발원, ~ (2011)
- Disentangling mode-specific selection and measurement bias in social surveys, "Buelens, B.", Statistics Netherlands, ~, pp.Discussion Paper 201211 (2012)
- De Leeuw, E. D., "To Mix or Not Mix Data Collection Modes in Surveys", Journal of Official Statistics, 21(2), pp.233~255 (2005)
- Dillman, D.A, "Response Rate and Measurement Differences in Mixedmode Surveys Using Mail, Telephone, Interactive Voice Response(IVR) and the Internet", Social Science Research, 38, pp.1~18 (2009)
- Jackle, A., "Assessing the Effect of Data Collection Mode on Measurement", International Statistical Review, 78(1), pp.3~20 (2010)
- the Use of Within-Subject Experiments for Estimating Measurement Effects in Mixed-mode Surveys, "Klausch, T.", Statistics Netherlands, ~, pp.Dicussion Paper 201406 (2014)
- WP3 Executive Summary, "Luiten, A.", Statistics Netherlands, ~ (2014)
- Olson, K., "Does Giving People Their Preferred Survey Mode Activity Increase Survey Participation Rates? an Experimental Examination", Public Opinion Quarterly, 76(4), pp.611~635 (2012)
- Shouten, "Optimizing Quality of Response through Adaptive Survey Designs", Survey Methodology, 39(1), pp.29~58 (2013)
- Vannieuwenhuyze, J., "Evaluating Relative Mode Effects in Mixed-Mode Surveys: Three Methods to Disentangle Selection and Measurement Effects", Sociological Method & Research, 42(1), pp.82~104 (2012)
- Vannieuwenhuyze, J., "A Method for Evaluating Mode effects in Mixed Mode Surveys", Public Opinion Quarterly, 74(5), pp.1027~1045 (2010)