딥러닝기반 실시간 표정인식 기술

기술명 딥러닝기반 실시간 표정인식 기술  기술개요 본 기술은 CCTV 카메라나 일반 USB 카메라를 대상으로 얼굴 영상을 입력받아 얼굴을 자동으로 검출하고 검출된 얼굴로부터 딥러닝(deep learning)기술 및 랜드마크 검출에 기반해 조명, 표정, 포즈, 액세서리 변화에 강인한 표정 인식 기술이다.   기술이전목적 및 필요성       표정인식 기술은 생체 신호에 기반한 다양한 감정인증 시스템에 비해 비 접촉식으로 생체정보 획득이 가능하여, 가장 사용자로 부터 인식에 따른 거부감이 적은 감정인식 기술이다. 그러나 타 생체정보에 비해 등록된 인식 정보와 입력된 인식 정보간의 차이가 카메라와 얼굴과의 거리, 조명, 표정, 포즈, 액세서리 변화 등에 따라 가변적으로 크게 발생하고, 시간이 지남에 따라 Aging에 영향을 받으며 표정 표현이 강하지 않으면 인식이 어렵다는 단점이 존재하였다.        딥러닝 기술이 알려지기 전까지, 기존의 표정인식 기술은 앞서 언급한 단점을 해결하지 못해 다양한 환경 변화에 강인한 인식 성능을 제공하지 못하였으나, 본 기술에서는 얼굴 표정 Big data에 기반한 최신 딥러닝 기술을 개발하여, 환경변화에 강인한 실시간 얼굴 표정인식 기술을 개발하였다.       기술의 특징 및 장점 . 기쁨, 슬픔, 놀람, 공포, 분노, 혐오 등 기본적인 6가지 감정을 학습시켰으나, 혐오 감정은 한국인이 짖기 힘든 감정으로 이를 평상으로 대치함 . 일반 CCTV 카메라나 저가의 USB 카메라 환경에서도 모두 적용 가능 . 640x480일반 사양의 컴퓨팅 환경에서 초당 1~5 프레임 이상의 실시간 얼굴 검출 및 인식 . 명암 정보를 사용한 얼굴 표정인식 기술  . 추출된 얼굴 영역은 128x128 이상되면 최적의 인식 성능을 보임      - 28 x 28 크기부터 얼굴 검출 및 인식이 가능하나 검출 크기가 작을수록 인식율이 감소함    . 동시에 다수의 얼굴이 입력돼도 검출 및 인식 가능  기술성숙도(TRL) 단 계 : 6       활용방안 및 기대성과       얼굴 표정 인식시스템은 현재도 출입자 관리, 화면 보호기, 은행 입/출입 및 얼굴 관련 콘텐츠 생성과 연관되어 인간의 감성에 따른 상황에 맞는 다양한 활용방안이 존재한다. 또한 본 기술은 국내 표정 인식 기술뿐 아니라 국외 표정 인식 기술을 사용하는 모든 나라에서 활용 가능한 장점이 있어, 기술이전 후 표정인식 시스템의 수출증대 효과가 있다.  기술이전 내용 및 범위     A. 기술명: 딥러닝기반 실시간 표정인식 기술          - 내국인 혹은 외국인 얼굴 실시간 자동 얼굴 검출 기술        - 내국인 혹은 외국인 얼굴 실시간 5가지 표정 인식 기술      B. 기술명 : 딥러닝기반 표정인식 기술 및 68포인트 랜드마크기반 표정인식 기술           - 내국인 혹은 외국인 얼굴 실시간 자동 얼굴 검출 기술        - 내국인 혹은 외국인 얼굴 실시간 5가지 표정 인식 기술        - 68 포인트 랜드마크 자동 검출기술         - 랜드마크 움직임에 기반한 표정 인식 기술      A. 기술명 : 딥러닝기반 실시간 표정 인식 기술        - 딥러닝기반 얼굴 자동검출, 표정인식 라이브러리 및 소스 코드        - window 버전        - Caffe 버전       B. 기술명 : 딥러닝기반 표정인식 기술 및 68포인트 랜드마크기반 표정인식 기술        - 딥러닝기반 얼굴 자동검출, 표정인식 라이브러리 및 소스 코드        - 실시간 68 포인트 랜드마크 검출, 랜드마크 움직임기반 표정인식 라이브러리 및          소스 코드        - window 버전 관련지적재산권 레이아웃 특허 2건 1) 얼굴 자세 기반의 얼굴 인식 장치 및 그 방법    (출원번호 : 2017-0181163)  2) 얼굴 인식용 등록 영상 선별 장치 및 방법    (출원번호 : 2018-0053851)  딥러닝기반 실시간 표정인식 프로그램 등 프로그램 2건 소셜로봇 지능 원천기술개발 시험절차서 등 기술문서 2건  첨부파일 002기술이전설명회발표자료(딥러닝 표정)_20181107.ppt 기 술 이 전 조 건 실시권 허용범위 비독점적 통상실시권 계약기간 계약체결일로부터 5 년간 기술료조건 (부가세별도) ※ 경상기술료 레이아웃 구분 중소기업 중견기업 대기업 착수기본료(천원) 45,000 90,000 90,000 매출정률사용료(%) 1.25 3.75 5 ※중소기업 또는 중견기업 기술료조건을 적용받고자 하는 경우에는 중소기업확인증 또는 중견기업확인증 제출 필요 기술전수교육 3  개월  /  1,000 천원정(부가세별도) 기타특기사항 세부기술 이전가능     (1세부기술)딥러닝기반 실시간 표정인식 기술 - 중소 15,000 중견/대기업 30,000     (2세부기술)딥러닝기반 표정인식 기술 및 68포인트 랜드마크기반 표정인식 기술  - 중소 30,000 중견/대기업 60,000 세 부 문 의 기술관련 레이아웃 기술개발 발표당시 HMI 연구그룹 윤호섭 ( 042-860-5233 , yoonhs@etri.re.kr ) 현재 지능로보틱스연구본부 윤호섭 ( 042-860-5233 , yoonhs@etri.re.kr ) 계약관련 레이아웃 기술개발 발표당시 기술이전실 김영규 ( 042-860-4960 , kyk@etri.re.kr ) 현재 기술이전실 김영규 ( 042-860-4960 , kyk@etri.re.kr )