ScienceDMZ 기반 인공지능 연구를 위한 분산 컴퓨팅 연계 방안 연구

Abstract

최근 ICT 기술을 선도하는 핵심 분야는 단연 빅데이터와 AI이며, 과학기술 분야에서도 기존에는 시뮬레이션중심의 연구 수행 형태에서 대용량 데이터 기반의 AI 분석 기법을 이용한 연구 환경으로 변화하고 있다. 이러한변화는 데이터의 사이즈의 변화에 따른 데이터 전송 속도의 문제와 AI를 연구하기 위한 컴퓨팅 환경 부족의 문제와 직면하였다. 또한 기존의 클라우드 컴퓨팅 기술은 다수의 사용자가 사용할 경우 데이터 전송량의 급증으로 데이터 전송 지연, 장애대응의 문제가 발생하였다. 이를 위해 분산처리 환경의 컴퓨팅 기술을 사용하여 문제를 해결한다. 따라서 과학기술연구망에서는 연구 환경의 변화에 맞추어 빅데이터를 고속으로 전송할 수 있는ScienceDMZ 환경 구축 및 부족한 컴퓨팅 인프라 환경을 개선하고자 한다. 본 논문에서는 출연연구소 8개의 기관과 협력하여 ScienceDMZ 기반의 빅데이터 전용 네트워크를 구축하고 구축된 인프라 위에 컨테이너 기반의 분산처리가 가능한 AI 연구 환경을 제공하는 플랫폼을 개발하여 기존의 문제들을 해결하고자 한다. 국내의ScienceDMZ 환경 구축 사례를 통해 대역폭 대비 80% 이상의 성능 향상의 결과를 보이며, AI 플랫폼의 CPU, GPU 컴퓨팅을 이용한 싱글, 병렬, 분산 컴퓨팅의 성능 비교를 통해 분산 컴퓨팅 성능의 우수성을 보이고자 한다.