The Journal of the Korea Contents Association (한국콘텐츠학회논문지)

The Korea Contents Association (한국콘텐츠학회)
권호 표지
DOI QR코드

DOI QR Code

Exploration of User Experience Research Method with Big Data Analysis : Focusing on the Online Review Analysis of Echo

빅데이터 분석을 활용한 사용자 경험 평가 방법론 탐색 : 아마존 에코에 대한 온라인 리뷰 분석을 중심으로

  • Received : 2016.06.13
  • Accepted : 2016.08.02
  • Published : 2016.08.28
Download PDF
⟨ Previous Next ⟩

Abstract

This study attempted to explore and examine a new user experience (UX) research method for IoT products which are becoming widely used but lack practical user research. While user experience research has been traditionally opted for survey or observation methods, this paper utilized big data analysis method for user online reviews on an intelligent agent IoT product, Amazon's Echo. The results of topic modelling analysis extracted user experience elements such as features, conversational interaction, and updates. In addition, regression analysis showed that the topic of updates was the most influential determinant of user satisfaction. The main implication of this study is the new introduction of big data analysis method into the user experience research for the intelligent agent IoT products.

이 연구는 이미 실생활에서 사용되고 있으나 이에 대한 실증적 사용자 경험 조사가 부족한 사물인터넷 기반 제품에 대한 새로운 사용자 경험 방법론을 탐색해보고자 진행되었다. 지금까지의 사용자 경험에 대한 연구가 주로 설문이나 관찰 방법 등을 통해 이루어져 온 것과 달리 본 연구에서는 사물인터넷 기반 제품 중 지능형 에이전트인 아마존 에코(Echo)를 대상으로 사용자들의 온라인 리뷰를 분석하는 빅데이터 분석 기법을 활용하여 사용자 경험을 살펴보았다. 토픽 모델링 분석 결과, 에코의 기능, 음성 인터랙션, 지속적인 기능 개선과 관련된 사용 경험 요인들이 도출되었다. 또한 회귀분석결과 지속적인 기능 개선이 만족도에 가장 큰 영향을 미치는 것으로 나타났다. 연구의 의의는 사용자 경험을 제고할 수 있는 지능형 사물인터넷 제품 연구방법으로서 빅데이터 분석방법론 활용 가능성을 제시한 점이다.

Keywords

References

  1. http://www.gartner.com/newsroom/id/3143521.
  2. https://googleblog.blogspot.kr/2016/05/io-building-next-evolution-of-google.html
  3. 조광수, "연결하고 운영하는 통합서비스가 참된 IoT인터넷 들어간 기계는 Smart Things일 뿐," 동아비즈니스리뷰(DBR), 제184권, 제1호, 2015.
  4. A. Brush, B. Lee, R. Mahajan, S. Agarwal, S. Saroiu, and C. Dixon, "Home automation in the wild: challenges and opportunities," Proceedings of the SIGCHI Conference on Human Factors in Computing Systems, ACM, 2011.
  5. J. Forlizzi, "How robotic products become social products: an ethnographic study of cleaning in the home," in Proceedings of the ACM/IEEE International Conference on Human-robot Interaction, ACM, 2007.
  6. C. Breazeal, "Social interactions in HRI: the robot view. Systems, Man, and Cybernetics, Part C: Applications and Reviews," IEEE Transactions, Vol.34, No.2, pp.181-186, 2004.
  7. J. Sung, R. E. Grinter, and H. I. Christensen, "Domestic robot ecology," International Journal of Social Robotics, Vol.2, No.4, pp.417-429, 2010. https://doi.org/10.1007/s12369-010-0065-8
  8. E. Welbourne, L. Battle, G. Cole, K. Gould, K. Rector, S. Raymer, M. Balazinska, and G. Borriello, "Building the internet of things using RFID: the RFID ecosystem experience," Internet Computing, IEEE, Vol.13, No.3, pp.48-55, 2009.
  9. A. P. Vermeeren, E. L. C. Law, V. Roto, M. Obrist, J. Hoonhout, and K. Vaananen-Vainio-Mattila, "User experience evaluation methods: current state and development needs," Proceedings of the 6th Nordic Conference on Human-Computer Interaction: Extending Boundaries, ACM, 2010.
  10. Jesper Kjeldskov and Connor Graham, "A review of mobile HCI research methods," Human-computer interaction with mobile devices and services, Springer, pp.317-335, 2003.
  11. J. Fink, V. Bauwens, F. Kaplan, and P. Dillenbourg, "Living with a vacuum cleaning robot," International Journal of Social Robotics, Vol.5, No.3, pp.389-408, 2013. https://doi.org/10.1007/s12369-013-0190-2
  12. J. Forlizzi and C. DiSalvo, "Service robots in the domestic environment: a study of the roomba vacuum in the home," Proceedings of the 1st ACM SIGCHI/SIGART Conference on Human-Robot Interaction. ACM, 2006.
  13. 이기호, 이인성, 전석원, 양승화, 최지웅, 김진우, 박승용, 한명희, "사용자 경험 측면에서 제품을 평가하는 방법," 한국HCI학회, 2008.
  14. 채승훈, 임재익, 강주영, "사용자 리뷰를 통한 소셜커머스와 오픈마켓의 이용경험 비교분석," 지능정보연구, 제21권, 제4호 pp.53-77, 2015. https://doi.org/10.13088/JIIS.2015.21.4.053
  15. O. Netzer, R. Feldman, J. Goldenberg, and M. Fresko, "Mine your own business: Market-structure surveillance through text mining," Marketing Science, Vol.31, No.3, pp.521-543, 2012. https://doi.org/10.1287/mksc.1120.0713
  16. D. M. Blei, "Probabilistic topic models," Communications of the ACM, Vol.55, No.4, pp.77-84, 2012. https://doi.org/10.1145/2133806.2133826
  17. Y. Jo and A. H. Oh, "Aspect and sentiment unification model for online review analysis," Proceedings of the fourth ACM International Conference on Web Search and Data Mining, ACM, 2011.
  18. 문지현, 임성택, 박차라, 이인성, 김진우, "사용자 경험에 대한 HCI 적 관점에서의 개념적 고찰," 한국 HCI 학회 논문지, 제3권, 제1호, pp.9-17, 2008.
  19. 이인성, 최보름, 김진우, 이기호, 정승기, "가치중심적 HCI 를 위한 새로운 방법론의 개발 및 적용," 한국 HCI 학회 논문지, 제2권, 제1호, pp.13-24, 2007.
  20. 장진철, 김현지, 박유경, 배동환, 이문용, "경험샘플링 방법을 이용한 스마트폰 사용자 경험 요소 도출," 한국 HCI 학회 학술대회, pp.249-252, 2014.
  21. J. A. Bargas-Avila and K. Hornbaek, "Old wine in new bottles or novel challenges: a critical analysis of empirical studies of user experience," Proceedings of the SIGCHI Conference on Human Factors in Computing Systems, ACM, 2011.
  22. M. Hassenzahl and N. Tractinsky, "User experience-a research agenda," Behaviour & Information Technology, Vol.25, No.2, pp.91-97, 2006. https://doi.org/10.1080/01449290500330331
  23. E. L. C. Law, V. Roto, M. Hassenzahl, A. P. Vermeeren, and J. Kort, "Understanding, scoping and defining user experience: a survey approach," Proceedings of the SIGCHI Conference on Human Factors in Computing Systems, ACM, 2009.
  24. 변대호, "감정표현어를 이용한 스마트 TV 의 사용자경험 평가," 한국콘텐츠학회논문지, 제15권, 제5호, pp.132-141, 2015.
  25. B. Pang and L. Lee, "Opinion mining and sentiment analysis," Foundations and Trends in Information Retrieval, Vol.2, No.1-2, pp.1-135, 2008. https://doi.org/10.1561/1500000011
  26. 최민영, 장혜진, 이호숭, "생활가전제품 디자인을 위한 온라인 리뷰 분석의 효용성 연구," 디지털디자인학연구, 제11호, 제4권, pp.185-194, 2011.
  27. J. H. Kim, H. S. Byeon, and S. H. Lee, "Enhancement of User Understanding and Service Value Using Online Reviews," The Journal of Information Systems, Vol.20, No.2, pp.21-36, 2011.
  28. 윤상혁, 손지현, 고민삼, 김영걸, "SNS 온라인 리뷰를 활용한 TV 프로그램 품질평가 연구," 방송통신연구, 제90권, 제4호, pp.42-73, 2015.
  29. 변대호, "감정표현어를 이용한 스마트 TV 의 사용자경험 평가," 한국콘텐츠학회논문지, 제15권, 제5호, pp.132-141, 2015.
  30. Anol Bhattacherjee, Social science research: principles, methods, and practices, Textbooks Collection, 2012.
  31. 조승연, 김현구, 김범수, 김희웅, "영화 흥행성과 예측을 위한 온라인 리뷰 마이닝 연구: 개봉 첫주 온라인 리뷰를 활용하여," Information Systems Review, 제16권, 제3호, pp.113-134, 2014.
  32. 조승연, 최지은, 이규현, 김희웅, "고객 온라인 구매후기를 활용한 추천시스템 개발 및 적용," 한국경영정보학회 학술대회, pp.157-164, 2015.
  33. D. M. Blei, A. Y. Ng, and M. I. Jordan, "Latent dirichlet allocation," the Journal of Machine Learning Research, Vol.3, No.4, pp.993-1022, 2003.
  34. 강범일, 송민, 조화순, "토픽 모델링을 이용한 신문 자료의 오피니언 마이닝에 대한 연구," 한국문헌정보학회지, 제47권, 제4호, pp.315-334, 2013.
  35. http://www.amazon.com/Amazon-SK705DI-Echo/dp/B00X4WHP5E#compare.
  36. 김승우, 김남규, "오피니언 분류의 감성사전 활용효과에 대한 연구," 지능정보연구, 제20권, 제1호, pp.133-148, 2014. https://doi.org/10.13088/JIIS.2014.20.1.133
  37. D. Meyer, K. Hornik, and I. Feinerer, "Text mining infrastructure in R," Journal of Statistical Software, Vol.25, No.5, pp.1-54, 2008.
  38. J. Chang and M. J. Chang, "Package 'lda'," Citeseer, 2010.
  39. J. Chang, S. Gerrish, C. Wang, J. L. Boyd-Graber, and D. M. Blei, "Reading tea leaves: How humans interpret topic models," in Advances in Neural Information Processing Systems, 2009.
  40. K. P. Burnham and D. Anderson, Model selection and multi-model inference: A Pratical informatio-theoric approach, Sringer, 2003.
  41. H. Akaike, "A new look at the statistical model identification," IEEE Transactions On Automatic Control, Vol.19, No.6, pp.716-723, 1974. https://doi.org/10.1109/TAC.1974.1100705