[특허] 딥러닝 기반의 스마트 TV 자동 제어 방법 및 이를 수행하는 스마트 TV

◆ 출원일 : 2020.07.15

◆ 등록일 : 2021.08.10

◆ 등록번호 : 10-2290510

요약 : 본 발명의 일 실시예에 따르면, 스마트 TV가, 딥러닝 기반의 자동 제어를 수행하는 방법에 있어서, 스마트 TV에 구비되어 있는 카메라를 통해 시청 환경 정보가 실시간으로 획득되고, 상기 시청 환경 정보는 상기 카메라의 촬영 가능 범위의 내에서 촬영되는 전방의 영상 또는 이미지인 것으로 할 때, (a) 인스턴스 분류(Instance Segmentation) 모델로 하여금 딥러닝을 수행하여 상기 실시간으로 획득된 시청 환경 정보를 기초로 복수의 객체(Object)를 인식하는 단계; (b) 상기 복수의 객체 중 특정 객체가 사람으로 인식된 경우, 상기 특정 객체의 윤곽선 정보를 기초로 상기 특정 객체가 미리 등록되어 있는 복수의 사용자 중 어느 하나인지 여부를 판단하는 단계; (c) 상기 특정 객체가 미리 등록되어 있는 복수의 사용자 중 어느 하나인 제1 사용자인 것으로 판단된 경우, 상기 제1 사용자에 대하여 맵핑 저장되어 있는 제1 맞춤형 설정 정보를 기초로 디스플레이 모듈 또는 스피커에 대해 1차 자동 제어를 수행하는 단계; 및 (d) 상기 1차 제어 수행이 완료된 후, 상기 특정 객체의 윤곽선 정보를 기초로 상기 특정 객체의 시청 상태 정보를 획득하고, 획득된 상기 특정 객체의 시청 상태 정보를 기초로 상기 디스플레이 모듈 또는 상기 스피커에 대해 2차 자동 제어를 수행하는 단계를 포함하고, 상기 인스턴스 분류 모델의 딥러닝은, 상기 촬영된 이미지 또는 영상에 포함되어 있는 복수의 객체 각각을 인식하고, 상기 복수의 객체 각각에 대한 종류 구분이 가능한 분류 모델의 딥러닝에 해당하며, 상기 윤곽선 정보는, 외곽 윤곽선 정보 및 신체 윤곽선 정보를 포함하되, 상기 외곽 윤곽선 정보는 상기 특정 객체의 외곽을 따라 형성된 윤곽선이며, 상기 신체 윤곽선 정보는 상기 특정 객체에 대한 음영 구분에 따라 형성된 윤곽선으로서 이목구비에 대한 윤곽선을 포함하는 것을 특징으로 하는, 딥러닝 기반의 스마트 TV 자동 제어 방법이 제공된다.