Driver State Monitoring

 

소개

Driver State Monitoring (DSM, 운전자 상태 감지) 엔진은 영상 이미지 데이터로부터 사용자 얼굴 검출, 시선 추적 및 눈감음 여부와 눈깜박임을 추적하여 얼굴의 위치와 머리 방향, 얼굴 특징점, 시선 방향 및 각도, 눈 감음 정도를 제공하는 엔진입니다.

또한 검출된 정보를 바탕으로 사용자의 얼굴을 등록/인식/해제하는 기능과 카메라의 가림 여부를 판단하는 기능을 제공합니다.

 

LG AI Platform에서 제공하는 DSM 엔진은 다음과 같은 특징을 가지고 있습니다.

DSM 엔진의 특징
특징 설명
얼굴 존재 유무 판단 영상 내의 사용자 얼굴의 존재 유무를 판단한다.
얼굴의 특징점들 추적 영상 내에서 사용자의 얼굴의 눈, 코, 입, 얼굴선 등의 특징점들을 추적한다.
얼굴 위치 및 머리 방향 추적 영상 내 3차원에서의 얼굴 위치 정보와 머리 방향을 추적한다.
사용자 시선 추적 사용자의 시선을 추적하여 시선 정보를 제공한다.
눈감음 여부 판단 사용자의 좌, 우안의 감음 정도를 판단한다.
사용자 얼굴 등록/인식/해제 기능 제공 사용자 얼굴을 인식하여 등록하거나 해제할 수 있다.
카메라 가림 정도 판단 카메라와 사용자 간의 방해물에 의해 가려짐 정도를 판단한다.

 

엔진 구조

DSM 엔진은 카메라를 통한 영상 이미지나 저장 매체에 저장된 파일 기반의 영상 이미지 데이터를 입력 받아서 분석 및 검출하여 해당 결과를 application에 전달하는 구조로 되어 있습니다.

입력 데이터로 영상 이미지 외에 configuration 등의 설정 정보를 받아 이미지 분석에 이용할 수 있습니다.

 

DSM 엔진 구조

활용하기

DSM 엔진은 영상 기반의 서비스가 필요한 분야에서 사용됩니다.

 

  • 운전자 졸음 감지

얼굴 추적 및 시선 추적 정보와 눈감음 정보를 활용하여 운전 중 사용자의 졸음을 감지하여 경고할 수 있습니다.

운전자의 졸음을 감지하는 DSM 엔진 기능 

  • 운전자 부주의 감지

얼굴 및 시선 추적 정보와 눈감음 정보를 활용하여 운전자의 부주의를 감지하여 경고할 수 있다.

운전자의 부주의를 감지하는 DSM 엔진 기능

  • 사용자 인증

얼굴 추적 정보를 활용하여 등록된 사용자 인지를 판단할 수 있다.

운전자를 인증하는 DSM 엔진의 기능