• 활동기관 : 삼성 SW 아카데미
• 활동기간 : 2020.05 ~ 2020.06
• 내용 : WebRTC이용 P2P 화상 면접 서비스 + deep_face API 이용 AI 표정 분석
• 역할
  1) deep face API 사용
  2) WebRTC 이용 P2P 형식 통신
  3) pyplot 사용 이미지 시각화
  4) opencv이용 프레임 분할

Source Code : git hub

Structue

node.js
python
javascript
deepface

WebRTC 이용 화상면접 : 면접관과 면접자간의 화상 면접을 진행하며 면접자는 자신의 영상을 녹화할 수 있다.

AI표정 분석 서비스 : 녹화한 동영상을 분석 => 결과값을 제시한다.

• 결과값1 : 로그 데이터(1초마다 각 분석값) CSV 형식

• 결과값2 : Critical 로그 데이터(면접자로서 신경써야할 부정적 감정이 70퍼센트 이상 드러날 경우 찍는 로그) JSON 형식

• 결과값3 : Graph 상위 도넛(긍정 / 부정) 하위 도넛( anger / disgust / fear / sad / surprise / happy / neutral)

결과값화면 (View 이용 예시) : json데이터와 그래프를 다음과 같이 나타낸다.