The Journal of the Institute of Internet, Broadcasting and Communication (한국인터넷방송통신학회논문지)

The Institute of Internet, Broadcasting and Communication (한국인터넷방송통신학회)
권호 표지
DOI QR코드

DOI QR Code

Analysis of Users' Gestures by Application in Smartphone Touch Interfaces

스마트폰 터치 인터페이스에서 애플리케이션별 사용자 제스처의 분석

  • 김지선 (이화여자대학교 컴퓨터공학) ;
  • 반효경 (이화여자대학교 컴퓨터공학)
  • Received : 2015.01.06
  • Accepted : 2015.04.10
  • Published : 2015.04.30
Download PDF
⟨ Previous Next ⟩

Abstract

Touch interface is widely used in a smartphone instead of a keyboard or a keypad interface that has been adopted in a PC or a featurephone, respectively. Touch interface can recognize a variety of gestures that clearly represent the distinct features of each application's input. This paper analyzes users' gesture of each application captured by the touch interface of a smartphone. Specifically, we extract touch input traces from various application categories such as game, web browser, youtube, image and e-book viewer, video player, camera, and map applications, and then analyzed them. Through this analysis, we observed a certain unique characteristics of each application's touch input, and this can be utilized in various useful areas such as identification of an application user, prevention of running an application by an illegal user, or design of a new interface convenient to a specific user.

스마트폰이 채택하고 있는 터치 인터페이스는 기존 피처폰 및 PC에서 채택하던 키패드나 키보드를 전면 대체하는 대중적인 인터페이스로 자리 잡았다. 특히, 터치 인터페이스는 개인별 다양한 동작 인식이 가능하고 애플리케이션별 입력 데이터 특성이 뚜렷이 구분되는 인터페이스이다. 본 논문에서는 스마트폰의 터치 인터페이스를 통해 나타나는 애플리케이션별 사용자 제스처를 분석한다. 특히, 안드로이드 스마트폰에서 널리 사용되는 게임, 웹 브라우져, 유튜브, 이미지 및 e-book 뷰어, 비디오 플레이어, 카메라, 지도 등 대표적인 애플리케이션 카테고리 별로 터치 인터페이스를 통해 입력되는 데이터를 추출하고 이를 분석하였다. 분석 결과 애플리케이션별로 고유한 터치 입력 패턴을 추출할 수 있었으며, 이를 통해 어떤 사용자가 어떤 애플리케이션을 수행했는지를 식별하는 용도, 소유자와 다른 입력 패턴이 들어올 경우 애플리케이션을 차단하는 용도, 나아가 사용자에게 편리한 새로운 인터페이스를 설계하는 용도 등에 본 연구의 결과가 활용될 수 있을 것으로 기대된다.

Keywords

References

  1. G. Lee, "Touch User Interface Technology Trends," KICS, Vol. 29 , No. 7, pp. 8-15, 2012.
  2. S. Heo and G. Lee, "Force Gesture: Augmented touch screen gestures using normal and tangential force," ACM UIST, 2011.
  3. C. Harrison and S. Hudson, "Using shear as a supplemental two-dimensional input channel for rich touchscreen interaction," ACM CHI, 2012.
  4. B. Lee et al., "Evaluation of human tangential force input performance," ACM CHI, 2012.
  5. Z. Xu, B. Kun, and S. Zhu, "Taplogger: Inferring user inputs on smartphone touchscreens using on-board motion sensors," ACM WISEC, 2012.
  6. W. Shi et al., "Senguard: Passive user identification on smartphones using multiple sensors," IEEE WiMob, 2011.
  7. J. Mantyjarvi et al., "Identifying users of portable devices from gait pattern with accelerometers," IEEE ICASSP Conference, pp.973-976, 2005.
  8. J. Han et al., "Accomplice: Location inference using accelerometers on smartphones," IEEE COMSNETS, 2012.
  9. E. Owusu et al., "Accessory: password inference using accelerometers on smartphones," ACM HotMobile, 2012.
  10. T. Feng, J. Yang, Z. Yan, E. M. Tapia, W. Shi, "TIPS: Context-Aware Implicit User Identification using Touch Screen in Uncontrolled Environments," ACM HotMobile, 2014.
  11. Y. Kim, J. Cho, W. Joung, "The Analysis of Vibration on the Guide Rail Installed with Manufacturing System of the Smart Phone Lens," Journal of the Korea Academia-Industrial cooperation Society, Vol. 15, No. 5, pp.2539-2544, 2014. https://doi.org/10.5762/KAIS.2014.15.5.2539
  12. M. Shahzad, A. Liu, and A. Samuel, "Secure unlocking of mobile touch screen devices by simple gestures: you can see it but you can not do it," IEEE MobiCom, 2013.
  13. S. Oh, "Design of Sensor-based Healthy Diet App for Smartphones," The Journal of The Institute of Internet, Broadcasting and Communication (JIIBC), Vol.. 14 No. 4, pp.141-147, 2014. https://doi.org/10.7236/JIIBC.2014.14.4.141