SW-Face : Facial Expression & Gesture Recognition


비전기술을 활용한 휴먼시그널 추출 & 심리학 기반의 얼굴인식 및 행동양식을 통한 심리상태 매칭 프레임워크
  • Facial Feature (Eye, Nose, Mouth, Face Contour) Detection & Tracking
  • Facial Feature Analysis
  • Facial Expression Identification
  • Head Pose Estimation
  • Hand Detaction & Tracking

Demo Video
  • KORAS 공인 인증 기관 성능 테스트 완료

Action Units - 얼굴근육의 활동 상태 분석

  • Class1 : AU04, AU12, AU15, AU23, AU28, AU45
  • Class2 : AU01, AU02, AU04, AU05, AU06, AU09, AU10, AU12, AU14, AU15, AU17, AU20, AU25, AU26


표정 검사 - 실시간 표정상태에 대한 분석결과 출력

  • 0 : Nature, 1 : Anger, 2 : Contempt, 3 : Disgust
  • 4 : Fear, 5 : Happy, 6 : Sadness, 7 : Surprise
  • 정보출력 : FPS, 표정 인식률(0.0~1.0), LandMark, 제스처 정보(손 검출, 머리 이동거리, 머리 상하/좌우 움직임 검출, 머리 좌우회전 검출

Multi-Camera 지원 & LOG 기능

  • Viture 카메라, Web 카메라(노출, Gain 조절), Depth 카메라 지원
  • 소프트웨어 내부 동작 시 발생하는 이벤트, 에러 상태, 알고리즘 동작 상태 실시간 출력
  • 로그 정보에 대한 실시간 파일 저장 & 관리


분석 & 재생 & 보고서 출력

  • 분석 : 카메라에 실시간으로 입력되는 영상을 자동 분석 & 결과 저장
  • 재생 : 저장된 영상 & 결과 로딩 후 실행(그래프를 이용한 특정 시점 재생 지원)
  • 보고서 출력 : 검사 일자, 검사 대상 정보, 분석 의견 작성 및 원형 차트를 이용한 분석 결과 출력

편리한 사용자 인터페이스

  • Algorithm Reset : 얼굴 및 눈, 코, 입 영역 검출에 대한 검출 방식 선택(매 프레임 초기화 or 기존 검출 결과를 활용한 고속 연산)
  • 제어 기능 : 마크 종류(Rectangle, LandMark), 마크 표시 유/무 설정, 제어 모드 설정 (재생 - 저장된 데이터 로딩, 시작, 종료, 일시정지 및 그래프 연동 재생 선택 / 분석 - 실시간 데이터 저장 유/무 및 분석에 대한 초기화, 시작, 종료)
  • 분석 결과 그래프 - 표정 클래스별 실시간 그래프 출력 여부 선택 및 그래프 표시 제어
Deep Learning & Adaboost & Local binary patterns