■ GPU 메모리 성능 2배 빠른 Ohm-GPU 개발

 

■ GPU 메모리 성능 2배 빠른 Ohm-GPU 개발

 

● 'Ohm-GPU', 고성능 가속기 메모리 시스템 시장 우위 선점 가능성

 

KAIST 정명수 교수 연구팀이 GPU (Graphic Processing Unit) 메모리 시스템 성능을 1.8배 증가시킬 수 있는 기술을 발표했다. 연구팀(KAIST 전기 및 전자공학부 컴퓨터 아키텍처 및 운영 체제 연구실)은 대용량 3D XPoint 메모리(XPoint)와 고성능 DRAM을 통합한 이종 메모리 시스템과 광 네트워크를 활용하여, 기존 DRAM 및 전기 네트워크 기반의 GPU 메모리 시스템 대비 181%의 성능 향상을 성취했다고 2021년 08월 02일 발표했다.

 

연구팀은 이 기술을 'Ohm-GPU'라고 이름 짓고 2021년 10월에 열릴 컴퓨터 구조 분야 최우수 학술 대회인 `마이크로(International Symposium on Microarchitecture, MICRO) 2021'에 관련 논문(Ohm-GPU: Integrating New Optical Network and Heterogeneous Memory into GPU Multi-Processors)을 발표할 예정이다. 연구팀이 제안한 ‘Ohm-GPU’는 광 네트워크(O)와 이종(h) 메모리(m)를 활용해 용량과 대역폭을 동시에 향상시킨 GPU 메모리 시스템이다. 이 기술은 XPoint와 DRAM을 통합한 이종 메모리 시스템을 사용하고, 전기 네트워크를 광 네트워크로 대체했다.

 

XPoint는 DRAM에 비해 용량이 크지만 데이터 전송 속도가 느리다. 반면, DRAM은 XPoint에 비해 데이터 전송 속도가 빠르지만 용량이 작다. DRAM을 단독으로 사용하는 메모리 시스템은 낮은 메모리 용량과 좁은 데이터 전송 대역폭으로 인해 연산 성능을 충분히 활용하지 못한다는 문제가 있다. 대안으로 XPoint를 쓰면 8배 큰 메모리 용량을 얻을 수 있는 반면 읽기/쓰기의 성능이 4배, 6배로 낮아진다. 정명수 교수팀이 개발한 Ohm-GPU 기술은 대용량 XPoint와 고성능의 DRAM을 통합한 이종 메모리 시스템을 채택함으로써, 기존 메모리 시스템과 동일한 성능을 가지면서도 메모리의 용량을 증가시켰다.

 

또한, 구리선 전기 채널의 통신 대역폭 한계를 극복하기 위해 단일 광 채널로 서로 다른 파장의 다중 광신호를 전달할 수 있는 광 네트워크를 채용했다. 다수의 메모리 컨트롤러가 단일 광 채널을 이용해 데이터를 전송하며, 메모리는 광 디멀티플렉서(demultiplexer)를 이용하여 통신하려는 파장의 데이터만 받는다. 이 기술은 GPU 내부에 있는 메모리 컨트롤러 및 인터페이스를 수정하여 이종 메모리의 모든 메모리 요청을 광신호로 처리한다. 메모리 요청은 일반적으로 DRAM 캐시 메모리에서 처리되지만, DRAM에 없는 데이터는 XPoint로부터 읽어와야 한다. 연구팀은 이때 발생하는 이종 메모리 간 데이터 이동의 오버헤드(대기 시간)를 완화하기 위한 최적화 설계를 수행했다.

 

연구팀은 "이 기술로 기존 DRAM을 단독으로 사용하는 전기 네트워크 기반의 GPU 메모리 시스템과 비교해 다양한 그래프처리, 과학응용 실행 등에서 181%의 성능 향상을 달성했다"고 밝히고 "인공지능(AI), 빅데이터, 클라우드 컴퓨팅 등 대용량, 고대역폭의 데이터 전송을 요구하는 고성능 가속기의 메모리 시스템을 대체할 수 있을 것"으로 기대했다. 정명수 교수는 "GPU 메모리 시스템 기술은 일부 해외 유수 기업이 주도하고 있지만, 이번 연구 성과를 기반으로 GPU 및 GPU와 유사한 모든 고성능 가속기 메모리 시스템 관련 시장에서 우위를 선점할 가능성을 열었다는 점에서 의미가 있다" 라고 강조했다.