该项目是一个基于Alluxio的分布式缓存框架,在当前的大数据分布式存储系统HDFS无法满足性能要求的前提驱动下,我们着手开发了一个分布式缓存系统。对于热数据,在读取之前预先将其缓存到内存中,读取的时候直接从内存中读取,大大提升了响应速度,该框架的主要技术难点是分布式系统下的元数据一致性。
评论