공간 내 사용자 얼굴의 위치/움직임에 따른 원근투영 왜곡 특성을 딥러닝 학습하여

근거리 원근투영 왜곡에 강인한 영상기반 3D AI 구현

단일 RGB 카메라만으로 실 공간과 연동한 얼굴의 Metric 3D 상호작용 특징의 실시간 검출

사용자의 자유로운 움직임을 허용하는 무구속, 무착장 상태에서 고속, 고정밀 검출 가능

시계열 정보에 의존하지 않는 프레임 단위의 안정적이고 정밀한 3D 헤드포즈/시선방향 검출

정면에서 측면(profile) 각도 까지의 넓은 동작범위 및 조명 환경 변화에 강인한 동작 지원

3D 얼굴 외형과 2D 얼굴 영상 간의 조밀한 픽셀단위 대응관계 검출을 통한 다양한 활용 가능

AI 추론 결과에 대한 신뢰도 정보를 실시간 제공

Mullti-task AI 추론 대상의 상호관계를 이용한 실시간 AI 추론 결과의 신뢰도를 자가 판단

자유로운 움직임 하에서의 AI 추론 신뢰도 기반으로 안정적인 실시간 상호작용 처리 가능

‘Single RGB 카메라+APU’ 기반 실시간 다중 사용자 공간 상호작용 인식으로
단말/콘텐츠와 사람 간 상호작용 서비스 비용 절감 및 동작 범위 적용 분야 확대

LiDAR, ToF 같은 고가의 Active 방식 센서 의존성 → Single RGB 카메라로 대체 가능

영상기반 AI 추론 모델 경량화로 모바일 AI Chip(CPU/GPU/NPU) 환경에서 실시간 동작 가능

사용자의 위치, 동작 제약 없는 근거리 상호작용 환경에서의 얼굴의 복합적 상호작용 정보 수집 가능

실내/외 다양한 조명환경에서 안정적 동작 가능

스크린 화면과 주변 공간을 포함하는 시선 상호작용 검출 가능

공간 상관관계 기반 AI 추론 신뢰도 자가 분석으로 안정적 운영 가능

프레임 단위 처리로 다양한 모바일-서버 연동 서비스 운영 시나리오에 활용 가능