Korean Public Administration Review (한국행정학보)

The Korean Association for Public Administration (한국행정학회)
권호 표지

인터넷조사방법론의 가능성과 쟁점 II: 2001년과 2006년 행정학회회원들에 대한 설문조사결과 비교를 토대로

Choe, Yeong-Hun;Myeong, Seung-Hwan;Lee, Gang-Chun
최영훈;명승환;이강춘

  • Published : 20080900
⟨ Previous Next ⟩

Abstract

The authors identify significant changes between 2001 and 2006 in the perceived scope and severity of methodological issues related to the use of the internet survey method. Both surveys relied upon data obtained from members of the Korean Association for Public Administration. The findings are: methodological validity and reliability issues of internet survey can be threatened by the availability of email address books a survey frame, possibility of being discarded as spam mail; technical issues can make respondents respond to a survey in case where electronic survey systems in use are constructed by researchers without proper skills; and methodological rigidity can be dependent more upon survey design and technical environment than it could in the survey of 2001. Even though there are few significant results over methodological issues questioned in the study, there is found a changing perception of the validity and reliability of internet surveys.

본 연구는 최근 인터넷을 활용한 설문조사가 활발히 이용되고 있는 점에 주목하여 인터넷조사방법론의 주요 쟁점과 문제점이 무엇인지, 그리고 그에 따른 해결방안이 무엇인지를 파악하고자 하였다. 본 연구는 2001년과 2006년에 동일한 내용으로 행정학회원을 대상으로 한 설문조사를 비교하여 인터넷 조사방법론에 대한 인식의 변화에 대한 분석을 시도하였다. 분석결과 인터넷 조사 방법에 대한 ‘절차적’ 측면이나 ‘실체적’ 측면 모두 개선된 인식을 보여주었으나 이메일 주소 목록 확보 및 자기선택 형태의 접근과 같은 네티즌의 특성, 스팸메일로 간주되어 응답률이 저하되는 등의 편향성이 남아있는 것으로 밝혀졌다. 인터넷 조사 방법에 대한 여러 쟁점들 가운데 통계적으로 유의미한 결과가 나타난 것은 거의 없으나 타당성이나 신뢰성에 대한 인식이 변화하고 있는 것을 볼 수 있었다. 또한 이메일 사용의 증가로 인해 표본추출과 관련된 쟁점들도 과거 조사와 비교하여 한층 안정되었다고 할 수 있다. 한편 설문 디자인과 인터넷 이용 환경 등이 전통적 설문방법 보다 더 영향을 미친다는 결과를 보여주고 있다. 또한 전문적인 기술지식이 없는 연구자가 직접 설문 시스템을 구축함에 따라 나타나는 여러 가지 기술적인 문제들도 응답에 어려움을 주는 중요한 부분으로 분석되었다. 따라서, 향후 인터넷조사방법이 ‘하나의’ 유용한 조사방법으로서 타당성과 신뢰성이 확보되기 위해서는 그 동안 끊임없이 제기되어온 대표성 확보와 표본추출의 문제, 무응답 오류에 대한 문제에 보다 초점을 두어 다양하게 개선방법을 강구할 필요가 있다. 이와 함께 피조사자의 응답행태와 설문디자인 및 기술적 측면을 동시에 고려하여 종합적인 해결방법과 가이드라인을 마련하는 것이 필요하다고 본다.

Keywords

References

  1. 김광용.김기수. (1999). 인터넷 설문조사를 활용한 사이버 쇼핑몰에 관한 연구. 한국경영정보학회연구, 9(2): 134-150
  2. 김광용.김기수. (2004). 인터넷 설문조사의 방법론적인 문제점과 데이터마이닝 기법을 활용한 개인화된 인터넷설문조사 시스템의 구축. 품질경영학회지, 32(2): 93-108
  3. 김병진.소재진. (2006). 사회복지조사방법론. 서울: 법문사
  4. 김영종. (2007). 사회복지조사론: 이해와 활용. 서울: 학지사
  5. 명승환.최영훈. (2002). 인터넷조사방법론의 가능성과 쟁점: 행정학회회원들에 대한 설문조사결과를 토대로. 한국행정학보, 36(2): 333-351
  6. 성태제.시기자. (2006). 연구방법론. 서울: 학지사
  7. 신민철. (2007). 사회연구방법의 기초. 서울: 창민사
  8. 이창희 외. (2007). 사회복지조사론. 서울: 창지사
  9. 채서일. 1996. 사회과학조사방법론 서울: 학현사
  10. Comley, P. 1996. The Use of the internet as a Data Collection Method. Preseated at the ESOMAR/EMAC Symposium, Edinburgh
  11. Couper, M. P. (2000). Web Surveys: A Review of Issues and Approaches. Public Opinion Quarterly. 64: 464-494 https://doi.org/10.1086/318641
  12. Couper, M. P., Traugott, M. W, & Lamias, M. J. (2001). Web Survey Design and Administration. Public Opinion Quarterly 65 (2): 230-253 https://doi.org/10.1086/322199
  13. Dillman, D. A. (2007). Mail and Internet Surveys: The Tailored Design Method. NJ: John Wiley & Sons
  14. Dixon, R., R. Turner. (2007). Electronic vs. Conventional Surveys. In Reynolds, R. A., R. Woods, J. D. Baker(ed.). Handbook of Research on Electronic Surveys and Measurement. London : Idea Group Reference
  15. Fowler, Jr. F.J. (1990). Survey Research Methods. Revised ed. Newbury Park: Sage Publications
  16. Grandcolas, U., R. Rettie, K. Marusenko. (2003). Web Survey Bias: Sample or Mode Effect. Journal of Marketing Management 19: 541-561 https://doi.org/10.1362/026725703322189940
  17. Jansen, K. J., K. G. Corley, B. J. Jansen. (2007). E-Survey Methodology. In Reynolds, R. A., R. Woods, J. D. Baker(ed.). Handbook of Research on Electronic Surveys and Measurement. London : Idea Group Reference
  18. Kiesler, S., & L. S. Sproull. (1986). Response effects in the electronic survey. Public Opinion Quarterly, 50: pp. 402-13 https://doi.org/10.1086/268992
  19. Korack-Kakabadse, A., & Korack-Kakabadse, N. (1999). Information Technology's Impact on the Quality of Democracy. In Rechard Heeks ed. 1999. Reinventing Government in the Information Age. London, England: Routledge: 211-228
  20. Manfreda, K. L., Batagelj, Z. & Vehovar, V. (2002). Design of Web Survey Questionnaires: Three Basic Experiments. Journal of Computer Mediated Communication, 7(3). (http://jcmc.indiana.edu/vol7/issue3/vehovar.htm)
  21. Manfreda, K. L., M. Bosnjak, J. Berzelak, I. Haas, V. Vehovar. (2008). Web survey versus other survey modes: A meta-analysis comparing response rates. International Journal of Market Research, 50(1): 79-104 https://doi.org/10.1177/147078530805000107
  22. Porter, S. R. & Whitcomb, M. E. (2003). The Impact of Contact Type on Web Survey Response Rates. Public Opinion Quarterly 65 (4): 579-588
  23. Reynolds, R. A., R. Woods, J. D. Baker. (2007) edited. Handbook of Research on Electronic Surveys and Measurement. London: Idea Group Reference
  24. Roberts, L. D. (2007). Opportunities and Constraints of Electronic Research. In Reynolds, R. A., R. Woods, J. D. Baker(ed.). Handbook of Research on Electronic Surveys and Measurement. London: Idea Group Reference
  25. Schonlau, M., Ronald D. Fricker, Marc N. Elliott. (2002). Conducting Research Surveys via E-Mail and the Web. Santa Monica, CA: RAND
  26. Vehovar, V., Lozar Manfreda, K., & Batagelj, Z. (2000). Design issues in WWW surveys. 2000 Proceedings of the Section on Survey Research Methods. Alexandria: American Statistical Association: 983-988