分布式爬虫——Redis

Redis介绍 背景 随着互联网+大数据时代的来临，传统的关系型数据库已经不能满足中大型网站日益增长的访问量和数据量。这个时候就需要一种能够快速存取数据的组件来缓解数据库服务I/O的压力，来解决系统性能上的瓶颈。 数据库的发展历史 在互联网+大数据时代来临之前，企业的一些内部信息管理系统，一个单个数据库实例就能满足系统的需求 单数据库实例 随着系统访问用户的增多，数据量的增大，单个数据库实例已经满

>>阅读原文<<