인텔이 제공하는 새로운 메모리 제품인 Intel Optane DCPersistent Memory Module(DCPMM)을 빅데이터 환경에 적용하기 위한 성능 테스트 결과 공유.DCPMM은 한 제품을 사용자 요건에 따라 메모리 모드 또는 스토리지(SSD) 모드로 활용할 수 있어 기존 메모리(DRAM) 대비 낮은 비용으로 사용할 수 있는 기술이다. 따라서 빅데이터/AI 환경에서 성능을 위해 메모리 기반 오픈소스를 많이 활용하는 아키텍처로 기존 DRAM 대비 어느 정도 성능을 제공하는지 테스트해봤다. 테스트한 오픈소스는 역시 메모리 기반 오픈소스인 Alluxio, Spark, Redis를 기준으로 검증했으며 가장 중요한 read/write 성능을 중심으로 비교했다. 세부 내용은 아래 slideshare에 공유https://www.slideshare.net/freepsw/optane-dc-persistent-memorydcpmm Optane DC Persistent Memory(DCPMM) 성능 테스트 from SANG WON PARK
테스트 결과 전체적으로 D램에 비해 성능이 그리 낮지 않아 비슷한 수준으로 제공될 것으로 보인다. 따라서 대용량 데이터를 처리하는 빅데이터 영역에서 I/O 성능은 전체 성능에 영향을 미치는 요소이므로 DCPM의 성능이 본 성능 테스트 결과 수준으로 제공되면 다양한 사업에서 비용 대비 효과가 높은 아키텍처를 구성하여 높은 성능의 시스템 제공이 가능할 것으로 판단된다.
