<aside> 📊 이 문서는 KAIST HCIL Careful Seminar를 위해 작성된 문서이다. 발표는 October 30, 2019 에 이루어 졌다.
</aside>
본 문서는 HCI 분야에서 손가락 트래킹을 활용한 인터랙션들을 제시한 연구들을 소개한다.
사실 Finger Tracking은 정말 정말 정말 넓은 분야이다. 비전 분야에서는 Finger Tracking을 포함한 Hand Pose Estimation 분야가 있다. 비전 이외의 다른 기술 관련 연구는 상대적으로 적기는 하지만 위에 나열한 논문 보다는 훨씬 많고 넓다. Finger Tracking으로 인터랙션을 디자인 하는 것도 중요 하지만, 일단 finger tracking 자체가 어려운 문제이기 때문에, 대부분의 논문들은 기술적인 측면에 집중 하고 있다. 때문에 이 문서 역시 기술적인 원리들에 대한 소개가 주를 이룬다.
이 문서에서는 HCI 이외의 연구를 다루지는 않는다. 만약 비전 분야에서 Hand Pose Estimation 연구의 동향을 알고 싶다면 이 Github Repo를 확인 하기 바란다. 모든 논문이 있지는 않겠지만 굉장히 많은 양의 연구들이 빠르게 업데이트 된다.
이 문서에서는 네가지(Capacitive Sensing, Acoustic Sensing, Magnetic Field Sensing, Vision)의 다른 기술을 사용하는 연구를 소개 한다.
아래는 이 문서에서 다루는, 다루지 않는 관련 논문들이다.
Relevant Papers (only in HCI field)
HandSee: Enabling Full Hand Interaction on Smartphone with Front Camera-based Stereo Vision
InfiniTouch: Finger-aware interaction on fully touch sensitive smartphones
Fingerio: Using active sonar for fine-grained finger tracking
Finexus: Tracking precise motions of multiple fingertips using magnetic sensing
총 네 가지의 다른 접근 방법의 논문들을 살펴 보았다. 4개의 논문 중 3개의 논문이 모바일에서 사용 할 수 있는 기술이지만, 다른 기술적 선택으로 인해서 다른 인터랙션들이 가능하고, 센싱의 물리적 거리나 센싱할 수 있는 손가락 개수 등이 다르다. 아직까지는 터치 스크린 위의 hover range에서의 finger tracking은 이루어 지지 않았고 이 부분을 Camfing이 채울 수 있을 것으로 기대 한다. HandSee가 일부 커버 했지만 센싱 범위에서 분명 한계가 있다. 터치 스크린 전체를 커버 하지 못하고, 터치 스크린 위로도 범위의 제약이 있다.