사이클 일관성을 가진 뉴럴 네트워크를 이용한 비지도 학습 기반 영상 정합 방법 및 그 장치

Abstract

사이클 일관성을 가진 뉴럴 네트워크를 이용한 비지도 학습 기반 영상 정합 방법 및 그 장치가 개시된다. 본 발명의 일 실시예에 따른 영상 정합 방법은 정합하고자 하는 제1 영상과 제2 영상을 수신하는 단계; 변형 필드에 대한 사이클 일관성(cycle consistency)을 가지는 비지도 학습 기반의 뉴럴 네트워크를 이용하여 상기 제1 영상과 상기 제2 영상에 대한 변형 필드를 출력하는 단계; 및 상기 출력된 변형 필드를 적용하는 공간 변형 함수에 기초하여 상기 제1 영상과 상기 제2 영상에 대한 정합 영상을 생성하는 단계를 포함하며, 상기 변형 필드를 출력하는 단계는 상기 제1 영상이 이동 영상이고 상기 제2 영상이 고정 영상인 경우 상기 제1 영상을 상기 제2 영상에 정합하기 위한 상기 제1 영상에 대한 변형 필드를 출력하고, 상기 생성하는 단계는 상기 공간 변형 함수를 이용하여 상기 제1 영상에 상기 제1 영상에 대한 변형 필드를 적용함으로써, 상기 정합 영상을 생성할 수 있다.