[18 OSDI] Pocket: Elastic Ephemeral Storage for Serverless Analytics

0 Abstract

서버리스 컴퓨팅이 점점 더 대중화되어 사용자가 높은 탄력성과 세분화된 청구로 클라우드에서 수천 개의 단기 작업을 빠르게 시작할 수 있습니다. 이러한 속성은 서버리스 컴퓨팅을 대화형 데이터 분석에 매력적으로 만듭니다. 그러나 분석 작업의 실행 단계 간에 중간 데이터를 교환하는 것은 서버리스 작업 간의 직접 통신이 어렵기 때문에 핵심 과제입니다. 자연스러운 접근 방식은 이러한 임시 데이터를 원격 데이터 저장소에 저장하는 것입니다. 그러나 기존 스토리지 시스템은 탄력성, 성능 및 비용 측면에서 서버리스 애플리케이션의 요구 사항을 충족하도록 설계되지 않았습니다. 저렴한 비용으로 애플리케이션에 원하는 성능을 제공하도록 자동으로 확장되는 탄력적인 분산 데이터 저장소인 Pocket을 소개합니다. Pocket은 여러 차원(CPU 코어, 네트워크 대역폭, 스토리지 용량)에 걸쳐 리소스의 크기를 동적으로 조정하고 여러 스토리지 기술을 활용하여 I/O에서 애플리케이션의 병목 현상을 방지하면서 비용을 최소화합니다. 우리는 Pocket이 서버리스 분석 애플리케이션을 위한 ElastiCache Redis와 유사한 성능을 달성하는 동시에 비용을 거의 60% 절감한다는 것을 보여줍니다.