Impossible Mission - 单机百亿文件的极致索引（设计篇）

  一. 背景     当下信息社会每天都产生大量需要保存的数据，这些数据在刺激海量存储技术发展的同时也带来了新的挑战。比如，海量数据为存储系统增加了大量的小文件，这些小文件的元数据如何管理？如何控制定位某个文件的时间和空间开销？ 随着对数据实时性要求的提高, 文件也越来越趋于碎片化，像短视频、直播类业务, 往往一个视频只有几百KB, 甚至几十KB大小。可以说, 一个成熟的对象存储系统最后都会面临

>>阅读原文<<