손짓으로 소통하는
반려로봇 프로젝트

카메라로 손 제스처를 인식해 반려로봇을 제어하는 프로젝트입니다. 손동작을 정지, 이동, 주목, 반응 유도 같은 행동에 연결하고 온디바이스 비전 환경에서 반응 속도와 자원 사용량을 살펴봅니다.

주요 기능

핵심 구성 요소와 손 제스처 실험 페이지를 한눈에 확인해 보세요.

손 제스처 인식

실시간 카메라에서 손 랜드마크와 제스처를 인식해 로봇 행동에 연결하는 입력 방식

제어 실험 허브

hand.html에서 모델 전환, 결과 확인, 샘플 수집을 거쳐 로봇 상호작용 규칙을 다듬는 실험 환경

온디바이스 중심 설계

반응 속도, 메모리 사용량, 추론 경량화를 고려한 로봇 탑재용 비전 입력 파이프라인

Step 1

손 제스처 페이지 진입

아래 버튼이나 상단 시작 버튼으로 hand.html 열기

Step 2

카메라와 모델 확인

실시간 영상과 MediaPipe·YOLO 모드의 인식 결과 점검

Step 3

커스텀 제스처 수집

필요한 손동작을 라벨링하고 샘플을 저장해 로봇용 동작 사전 구성

Step 4

로봇 제어 로직 연결

인식 결과를 정지, 출발, 대기, 시선 이동 같은 로봇 동작과 연결

프로젝트 개요를 살펴본 뒤 hand.html에서 제스처 인식과 샘플 수집을 실험해 보세요.