표제지
목차
요약 4
약어정리 8
I. 서론 9
II. 기존 디스플레이와 사용자 인식 기술 분석 11
1. 기존의 디스플레이 기반 사용자 인식 기술 분석 11
2. 뎁스 카메라를 이용한 제스처 인식 기술 분석 14
3. 기존연구의 한계점 분석 15
III. 뎁스 카메라를 이용한 영상 처리 연구 18
1. 뎁스 카메라 인식 방법 연구 18
가. 이미지 센서의 뎁스 인식 방법 개요 18
나. 이미지 센서의 뎁스 인식 방법 연구 21
2. 뎁스 카메라를 이용한 1인 처리를 위한 인식 기술 23
가. 1인 처리를 이용한 멀티 사용자 인지 기술 개요 23
나. 1인 처리를 이용한 멀티 사용자 인지 기술 연구 24
3. 뎁스 카메라기반 제스처 인식 기술 연구 26
가. 뎁스 카메라를 이용한 제스처 인식 기술 개요 26
나. 뎁스 카메라의 제스처 인식 기술 연구 26
4. Finite State Machine 적용형 콘텐츠 연구 28
가. Finite State Machine의 기술 개요 28
나. Finite State Machine 적용이 가능한 콘텐츠 알고리즘 연구 29
IV. IoT 센서 연계형 디스플레이용 영상 처리기반 HCI 콘텐츠 구현 및 실험 32
1. IoT 센서 연계형 디스플레이용 HCI 콘텐츠 구현 32
가. 뎁스 카메라 기반 제스처 인식 기술 적용한 디스플레이 콘텐츠 구성 및 제작 32
나. 뎁스 카메라 기반 제스처 인식 기술 적용한 디스플레이용 콘텐츠 UI 제작 36
2. IoT 센서 연계형 디스플레이용 영상 처리기반 HCI 콘텐츠 구동 실험 38
3. 실험결과 분석 및 고찰 43
V. 결론 45
참고문헌 46
Abstract 49
Table 2.1. 터치패널의 형태별 비교 12
Table 2.2. 기존 기술과 제안기술의 비교 17
Table 3.1. 키넥트의 부분별 사양 19
Table 3.2. 키넥트 구성표 21
Table 3.3. IoT 사이니지용 FSM 적용형 상태표 30
Table 4.1. 제스처 입력에 따른 상태별 콘텐츠 구성 37
Table 4.2. 제스처 인식 평가 측정값 43
Fig. 2.1. 기존 디스플레이의 터치 입력 방식 11
Fig. 2.2. Motion History Image 예시 14
Fig. 3.1. 키넥트의 내부 구성 입체도 18
Fig. 3.2. 환경구성을 통한 키넥트 거리 인식 개념도 20
Fig. 3.3. 키넥트 사용자 인식 앵글영역 22
Fig. 3.4. 키넥트 사용자 인식 최소 거리 22
Fig. 3.5. 1인 처리 개념도 24
Fig. 3.6. 1인 위치 인식 기술 흐름도 24
Fig. 3.7. 키넥트 사용자 복수 인지 25
Fig. 3.8. 제스처 인식 기술 개념도 26
Fig. 3.9. 제스쳐 인식 및 센서 간 연동 SW 동작 흐름도 27
Fig. 3.10. Swipe 인식 실험 27
Fig. 3.11. FSM 적용형 콘텐츠 개념도 29
Fig. 3.12. IoT 센서 연계형 뎁스 카메라 기반 디스플레이용 콘텐츠 상태 변환 오토마타 31
Fig. 4.1. 제스처 인식이 가능한 서비스 시스템 구성 32
Fig. 4.2. 키넥트 기반 사용자 서비스 제공 흐름도 33
Fig. 4.3. 클래스 구조 33
Fig. 4.4. 뷰 패키지 34
Fig. 4.5. 스켈레톤 트래킹 34
Fig. 4.6. 제스처 인식 클레스 구성 35
Fig. 4.7. 메인윈도우 구성 35
Fig. 4.8. 메인 오브젝트의 동작 패턴 37
Fig. 4.9. 비가 내리는 상태 이미지 38
Fig. 4.10. IoT 센서 연계형 디스플레이용 HCI용 디스플레이를 이용한 기능 실험 39
Fig. 4.11. 제스처(하)에 대한 이벤트 발생 실험 39
Fig. 4.12. 제스처(하)의 기능과 FSM 동작 결과 40
Fig. 4.13. FSM 동작 실험 및 결과 40
Fig. 4.14. 이전 이벤트 종료 후 대기 상태로 전환 41
Fig. 4.15. 제스처(좌)에 대한 실험 및 결과 41
Fig. 4.16. 제스처(우)에 대한 실험 및 결과 42
Fig. 4.17. 제스처(상)에 대한 실험 및 결과 42
Fig. 4.18. 제스처 성능평가 및 제스처에 따른 이벤트 43
Fig. 4.19. 제스처 인식률 평가 그래프 44