面向存算分离架构的混合粒度缓存策略OACSTPCD
存储计算分离方案已成为一种提高大规模数据处理性能及效率的系统架构,但其存储层的访问效率低、网络开销大、对小文件不友好,存在着极大的性能瓶颈.基于MergeTree的数据库ClickHouse在数据存储过程中会产生很多小文件. ClickHouse和S3存算分离方案中文件粒度固定的SSD (solid state driver)缓存区不仅和内存数据不匹配,还会造成缓存区空间浪费.提出了一种面向存算分离架构的缓存管理方案HG-Buffer (hybr…查看全部>>
梅文娟;蔡鹏
华东师范大学数据科学与工程学院,上海200062华东师范大学数据科学与工程学院,上海200062
计算机与自动化
存算分离多粒度缓存管理固态硬盘缓存
《华东师范大学学报:自然科学版》 2023 (5)
P.26-39,14
评论