Redis从入门到放弃 之 Nosql

1、为何要使用Nosql

一、传统关系型数据库的瓶颈

        传统的关系数据库具备不错的性能,高稳定型,久经历史考验,并且使用简单,功能强大,同时也积累了大量的成功案例。在互联网领域,MySQL成为了绝对靠前的王者,绝不夸张的说,MySQL为互联网的发展作出了卓越的贡献。在90年代,一个网站的访问量通常都不大,用单个数据库彻底能够轻松应付。在那个时候,更多的都是静态网页,动态交互类型的网站很少。到了最近10年,网站开始快速发展。火爆的论坛、博客、sns、微博逐渐引领web领域的潮流。在初期,论坛的流量其实也不大,若是你接触网络比较早,你可能还记得那个时候还有文本型存储的论坛程序,能够想象通常的论坛的流量有多大。程序员

二、Memcached+MySQL

后来,随着访问量的上升,几乎大部分使用MySQL架构的网站在数据库上都开始出现了性能问题,web程序再也不仅仅专一在功能上,同时也在追求性能。程序员们开始大量的使用缓存技术来缓解数据库的压力,优化数据库的结构和索引。开始比较流行的是经过文件缓存来缓解数据库压力,可是当访问量继续增大的时候,多台web机器经过文件缓存不能共享,大量的小文件缓存也带了了比较高的IO压力。在这个时候,Memcached就天然的成为一个很是时尚的技术产品。web

Memcached做为一个独立的分布式的缓存服务器,为多个web服务器提供了一个共享的高性能缓存服务,在Memcached服务器上,又发展了根据hash算法来进行多台Memcached缓存服务的扩展,而后又出现了一致性hash来解决增长或减小缓存服务器致使从新hash带来的大量缓存失效的弊端。面试

三、Mysql主从读写分离

因为数据库的写入压力增长,Memcached只能缓解数据库的读取压力。读写集中在一个数据库上让数据库不堪重负,算法

大部分网站开始使用主从复制技术来达到读写分离,以提升读写性能和读库的可扩展性。Mysql的master-slave模式sql

成为这个时候的网站标配了。数据库

 

 

四、分表分库

随着web2.0的继续高速发展,在Memcached的高速缓存,MySQL的主从复制,读写分离的基础之上,缓存

这时MySQL主库的写压力开始出现瓶颈,而数据量的持续猛增,因为MyISAM使用表锁,在高并发下服务器

会出现严重的锁问题,大量的高并发MySQL应用开始使用InnoDB引擎代替MyISAM。同时,开始流网络

行使用分表分库来缓解写压力和数据增加的扩展问题。这个时候,分表分库成了一个热门技术,是架构

面试的热门问题也是业界讨论的热门技术问题。也就在这个时候,MySQL推出了还不太稳定的表分

区,这也给技术实力通常的公司带来了但愿。虽然MySQL推出了MySQL Cluster集群,可是因为在

互联网几乎没有成功案例,性能也不能知足互联网的要求,只是在高可靠性上提供了很是大的保证。

 

 

五、MySQL的扩展性瓶颈

在互联网,大部分的MySQL都应该是IO密集型的,事实上,若是你的MySQL是个CPU密集型的话,那么极可能你的MySQL设计得有性能问题,须要优化了。大数据量高并发环境下的MySQL应用开发愈来愈复杂,也愈来愈具备技术挑战性。分表分库的规则把握都是须要经验的。虽然有像淘宝这样技术实力强大的公司开发了透明的中间件层来屏蔽开发者的复杂性,可是避免不了整个架构的复杂性。分库分表的子库到必定阶段又面临扩展问题。还有就是需求的变动,可能又须要一种新的分库方式。

MySQL数据库也常常存储一些大文本字段,致使数据库表很是的大,在作数据库恢复的时候就致使很是的慢,不容易快速恢复数据库。好比1000万4KB大小的文本就接近40GB的大小,若是能把这些数据从MySQL省去,MySQL将变得很是的小。

关系数据库很强大,可是它并不能很好的应付全部的应用场景。MySQL的扩展性差(须要复杂的技术来实现),大数据下IO压力大,表结构更改困难,正是当前使用MySQL的开发人员面临的问题。

六、Nosql应运而生

易扩展

NoSQL数据库种类繁多,可是一个共同的特色都是去掉关系数据库的关系型特性。数据之间无关系,这样就很是容易扩展。也无形之间,在架构的层面上带来了可扩展的能力。

大数据量,高性能

NoSQL数据库都具备很是高的读写性能,尤为在大数据量下,一样表现优秀。这得益于它的无关系性,数据库的结构简单。通常MySQL使用Query Cache,每次表的更新Cache就失效,是一种大粒度的Cache,在针对web2.0的交互频繁的应用,Cache性能不高。而NoSQL的Cache是记录级的,是一种细粒度的Cache,因此NoSQL在这个层面上来讲就要性能高不少了。

灵活的数据模型

NoSQL无需事先为要存储的数据创建字段,随时能够存储自定义的数据格式。而在关系数据库里,增删字段是一件很是麻烦的事情。若是是很是大数据量的表,增长字段简直就是一个噩梦。这点在大数据量的web2.0时代尤为明显。

高可用

NoSQL在不太影响性能的状况,就能够方便的实现高可用的架构。好比Cassandra,HBase模型,经过复制模型也能实现高可用。

 

NoSQL数据库的出现,弥补了关系数据(好比MySQL)在某些方面的不足,在某些方面能极大的节省开发成本和维护成本。

MySQL和NoSQL都有各自的特色和使用的应用场景,二者的紧密结合将会给web2.0的数据库发展带来新的思路。让关系数据库关注在关系上,NoSQL关注在存储上。

 

2、什么是Nosql

 

  NoSQL,泛指非关系型的数据库。NoSQL = not only sql


一、四大分类

 

Key-Value 型数据库:

键值数据库就像在传统语言中使用的哈希表。你能够经过key来添加、查询或者删除数据,

鉴于使用主键访问,因此会得到不错的性能及扩展性。

 

主要框架:Redis

 

应用场景:储存用户信息,好比会话、配置文件、参数、购物车等等。这些信息通常都和ID(键)挂钩,

    这种情景下键值数据库是个很好的选择

文档型数据库:

文档型数据库同第一种键值存储相相似,该类型的数据模型是以特定的格式存储,好比JSON(BSON)。

文档型数据库可 以看做是键值数据库的升级版,容许之间嵌套键值。并且文档型数据库比键值数据库的查询效率更高。

 

主要框架:MongoDB

应用场景:日志。企业环境下,每一个应用程序都有不一样的日志信息。Document-Oriented数据库并无固定的模式,

因此咱们可使用它储存不一样的信息。分析。鉴于它的弱模式结构,不改变模式下就能够储存不一样的度量方法及添加新的度量。

 

 

列存储数据库。

 

这部分数据库一般是用来应对分布式存储的海量数据。键仍然存在,可是它们的特色是指向了多个列。

这些列是由列家族来安排的。如:Cassandra, HBase, Riak.

 

应用场景:日志。由于咱们能够将数据储存在不一样的列中,每一个应用程序能够将信息写入本身的列族中。

博客平台。咱们储存每一个信息到不一样的列族中。举个例子,标签能够储存在一个,类别能够在一个,而文章则在另外一个。

图形(Graph)数据库

 

图形结构的数据库同其余行列以及刚性结构的SQL数据库不一样,它是使用灵活的图形模型,

而且可以扩展到多个服务器上。NoSQL数据库没有标准的查询语言(SQL),所以进行数据

库查询须要制定数据模型。许多NoSQL数据库都有REST式的数据接口或者查询API。

Neo4J、Infinite Graph、OrientDB

 

应用场景:在一些关系性强的数据中,推荐引擎。若是咱们将数据以图的形式表现,那么将会很是有益于推荐的制定

 

 

二、其余

通常nosql适用的场景都是读多写少,由于数据库主要压力来自于用户的读取数据。

在众多NoSQL中咱们通常拿Redis替换Memecached使用。    

 

 

众多语言都支持Redis,由于Redis交换数据快,因此在服务器中经常使用来存储一些须要频繁调取的数据,

这样能够大大节省系统直接读取磁盘来得到数据的I/O开销,更重要的是能够极大提高速度。

 

拿大型网站来举个例子,好比a网站首页一天有100万人访问,其中有一个板块为推荐新闻。要是直接

从数据库查询,那么一天就要多消耗100万次数据库请求。上面已经说过,Redis支持丰富的数据类型,

因此这彻底能够用Redis来完成,将这种热点数据存到Redis(内存)中,要用的时候,直接从内存取,

极大的提升了速度和节约了服务器的开销。

 

 

 

 

 

 

 

 

文章引用:

一、http://www.infoq.com/cn/news/2011/01/nosql-why

相关文章
相关标签/搜索