ETRI 기술이전 사이트에 오신걸 환영합니다.
다양한 영상 조건에서의 딥러닝 기반 휴먼 행동 인식
키워드
기술개요
행동 인식 기술은 다양한 센서들에서 입력되는 휴먼의 동작과 관련된 정보를 분석하고 해석하여 휴먼이 어떤 행동을 취하고 있는지를 인식하는 기술이다. 행동 인식 기술은 지능형 CCTV, 서비스 로봇, 헬스케어, 스마트 인터랙션 등 다양한 분야에서 활용될 수 있는 파급력이 매우 큰 기술 중의 하나이다.
본 이전 대상 기술은 카메라로부터 획득된 영상 데이터만을 분석하여 휴먼의 행동을 인식하는 영상분석 기반의 행동 인식 기술이다. 가속도 센서, 근전도 센서 등의 신체에 부착하는 센서 정보를 활용하는 기술들에 비하여 활용성이 높고 확장성이 좋다.
본 기술은 다양한 종류의 카메라로부터 입력받은 영상들에 대해서도 안정적으로 행동을 인식할 수 있는 기반 기술이라는 특징을 지닌다.
기존 기술들은 일반 CCTV 카메라로부터 획득된 RGB 영상에서의 행동 인식을 주요 대상으로 한다. 본 기술은 RGB 영상뿐만 아니라 사람이 육안으로 행동의 판별이 가능한 영상이라면 인식이 가능하다. 신원 확인이 어려워 개인정보 보호에 유용한 적외선 열화상 영상, 3차원 깊이 영상, 그리고 가상합성 영상도 입력 영상이 될 수 있다.
본 기술은 휴먼이 취할 수 있는 다양한 행동을 그 인식 대상으로 한다. 일상행동, 건강이상행동, 폭행상황, 침입행위, 비정상행동 등 인식 대상에 제한이 없으며, 연구진은 기업의 사업화 분야와 요구사항에 따라 기술 적응과 최적화를 지원한다.
기술이전 목적 및 필요성
ㅇ 스마트폰, CCTV, 블랙박스, 디지털카메라, 로봇 등 영상을 촬영할 수 있는 다양한 기기들이 기하급수적으로 증가함에 따라 지능형 영상 분석 기술에 대한 수요도 지속적으로 증가하고 있음
ㅇ 인공지능의 발전과 함께 영상 분석 기술도 그 성능이 획기적으로 향상되었고 정지 영상(이미지)을 대상으로 하는 영상 분석 기술들이 점차 상용화되고 있는 추세임
ㅇ 본 기술은 연속되는 일련의 영상(비디오)을 분석하여 휴먼의 행동을 인식하는 기술로서 보다 높은 차원의 다양한 지능형 영상 분석 서비스를 가능하게 하는 기술임, 특히 행동 인식 기술의 활용에 있어서 대상 행동과 환경의 차이로 인해 발생하는 다양한 도메인 적용의 문제를 최소화하기 위해 기술 수요자의 요구사항을 반영하는 프로세스를 포함하고 있음
기술의 특징 및 장점
ㅇ 다양한 영상 조건에서 행동 인식이 가능
- 일반 CCTV 카메라로부터 획득된 2D RGB 영상
- 3차원 카메라로부터 획득된 3차원 깊이 영상
- 적외선 열화상 카메라로부터 획득된 영화상 영상
- 가상환경에서 획득된 가상합성 영상 등

ㅇ 인식 대상 행동의 제한이 없음
- 지능형 CCTV를 위한 이상행동 감지
- 서비스 로봇을 위한 일상 행동 인식
- 헬스케어를 위한 건강 이상징후 감지
- 스마트 인터렉션을 위한 휴먼 의도 인식

ㅇ 최신 딥러닝 기법의 시각 인공지능 기술
- 다양한 환경과 상황을 학습하여 높은 신뢰성 확보
- 기업의 사업화 분야와 요구사항에 따라 기술 적응과 최적화 지원
기술의 성숙도
활용방안 및 기대성과
ㅇ 지능형 CCTV 분야에서의 비정상행동 및 불법행위 탐지
ㅇ 서비스 로봇 분야에서의 자연스러운 상호작용 및 휴먼 생활패턴 분석
ㅇ 헬스케어 서비스 분야에서의 위험 상황 감지 및 건강 관리 지원
ㅇ 스마트 고객 관리 분야에서의 고객 카운팅 및 고객 행동 패턴 분석
ㅇ 엔터테인먼트 분야에서의 동작을 기반으로 하는 게임 및 교육 컨텐츠
ㅇ 제스처/동작/행동을 기반으로 하는 자연스러운 사용자 인터페이스
기술이전 내용 및 범위
ㅇ 기술이전의 내용
A. 기술명 : 다양한 영상 조건에서의 딥러닝 기반 휴먼 행동 인식 기술
- 영상 내에 존재하는 복수명의 휴먼의 위치를 검출하는 기술
- 휴먼의 자세를 인식하는 기술
- 다양한 영상 조건에서 휴먼의 행동을 인식하는 기술
= 인식 대상 행동 및 영상 조건에 대한 사전 협의 필요
ㅇ 기술이전의 범위
A. 기술명 : 다양한 영상 조건에서의 딥러닝 기반 휴먼 행동 인식 기술
- 행동 인식 엔진 (소스 제공)
- 행동 인식 시연 프로그램 (소스 제공)
- 기술 문서
= 사용 설명서
= 성능평가 시험절차서 및 결과서
관련지적재산권
특허 1건
1) CCTV 영상 기반 이상 행동 감지 방법 및 이를 위한 장치
(출원번호 : 2020-0034430)
2차원 관절 정보 기반 행동 인식기 등 프로그램 4 건
요구사항 정의서 : 비전기반 행동인식 기술 등 기술문서 5건
첨부파일
기술이전조건
실시권 허용범위
비독점적 통상실시권
계약기간
계약체결일로부터 5 년간
기술료조건(부가세별도)
※ 정액기술료(단위:천원)
구분 중소기업 중견기업 대기업
정액기술료 100,000 300,000 400,000
※ 중소기업 또는 중견기업 기술료조건을 적용받고자 하는 경우에는 중소기업확인증 또는 중견기업확인증 제출 필요
기술전수교육
2 개월 / 1,000 천원정(부가세 별도)
기타특기사항
ㅇ 상세 기술료 조건
- 단순/제약 환경 휴먼 행동 인식 기술 : 중소기업 50백만원, 중견기업 100백만원, 대기업 100백만원
- 일반/제약 환경 휴먼 행동 인식 기술 : 중소기업 70백만원, 중견기업 210백만원, 대기업 280백만원
- 일반/비제약 환경 휴먼 행동 인식 기술 : 중소기업 100백만원, 중견기업 300백만원, 대기업 400백만원
* 위 상세 기술은 기술별 별도로 기술이전 : 단순/제약 환경 휴먼 행동인식 기술을 기술이전 후 타 상세 기술 기술이전을 원하는 경우 별도 기술료 적용

ㅇ 기술지도를 선택하신 경우 소요비용/기간
- 1,000천원(2개월)
세부문의
기술관련
기술개발 발표당시 인간로봇상호작용연구실 김도형 (042-860-5873, dhkim008@etri.re.kr)
현재 소셜로보틱스연구실 김도형 (042-860-5873, dhkim008@etri.re.kr)
계약관련
기술이전실 안희진 (042-860-5784, ahj@etri.re.kr)