MediaPipe란 무엇이며, Unity에서 사용할 수 있을까?

 

📌 Mediapipe란?

 

Mediapipe는 Google에서 개발한 멀티플랫폼 실시간 머신러닝 프레임워크입니다. 주로 실시간 비디오 스트림에서 사람의 동작, 손, 얼굴 등의 요소를 인식하는 데 사용됩니다.

 

 

Mediapipe의 대표 기능:

 

• 🤚 Hand Tracking – 손가락 관절 인식
• 🧍‍♂️ Pose Estimation – 33개 관절 추적
• 😀 Face Mesh – 얼굴 468개 특징점 인식
• 📦 Object Detection – 객체 탐지

 

고성능 yet 실시간 처리이기 때문에, AR/VR, 피트니스 앱, 인터랙티브 게임 등에 적합합니다.

 

---

 

🧩 Unity에서 Mediapipe 사용할 수 있을까?

 

Unity는 기본적으로 C#을 기반으로 한 게임 엔진이며, Mediapipe는 C++/Python 기반으로 만들어졌기 때문에 직접적인 사용은 어렵습니다.

그러나! 커뮤니티에서 만든 공식은 아니지만 매우 강력한 Unity용 Mediapipe 플러그인이 있습니다.

 

 

🔌 MediaPipeUnityPlugin by 

homuler

GitHub - homuler/MediaPipeUnityPlugin: Unity plugin to run MediaPipe

 

 

이 플러그인은?

 

• Google의 Mediapipe를 Unity에서 직접 실행할 수 있도록 만든 비공식 플러그인
• C++과 Unity의 네이티브 플러그인 브리지를 활용
• Android, Windows, macOS 지원 (iOS는 설정 필요)

 

 

 

💡 Mediapipe + Unity 조합, 어디에 쓸 수 있을까?

 

 

분야활용 예시

🎮 게임	손 동작으로 캐릭터 조작, 제스처 공격
🧘 피트니스 앱	자세 정확도 피드백 제공
🎥 라이브 방송	얼굴 필터, 배경 분리
🤖 로봇 제어	제스처 기반 제어 시스템