Redis
Nosql 概述
为什么要用Nosql
1、单机MySQL的年代
90年代,一个基本的网站访问量不会太大,单个数据库完全足够!更多的是使用静态页面 Html,服务器没有太大的压力
这种情况下,网站的瓶颈是什么?
1、数据量如果太大,一个机器放不下
2、数据的索引(B+ Tree),一个机器内存放不下
3、访问量(读写混合),一个服务器承受不了~
只要开始出现以上三种情况之一,就必须要晋级!
2、Memcached(缓存)+MySQL+垂直拆分(读写分离)
网站80%情况都是在读,每次都要区查询数据库的话就十分麻烦!所以说我们希望减轻数据库压力,使用缓存来保证效率!
发展过程:优化数据结构和索引—>文件缓存(IO)—>Memcached(当时最热门的技术)
3、分库分表+水平拆分+MySQL集群
技术和业务在发展的同时,对人的要求也越来越高了。
本质:数据库(读,写)
早些年MyISAM:表锁,十分影响效率!高并发下就会出现严重的锁问题
Innodb:行锁,
使用分库分表解决写的压力
MySQL的集群,很好满足所有需求
最近年代
2010~2020,发生了很大变化;(定位,也是一种数据,音乐,热榜)
MySQL等关系型数据库就不够用了!数据量很多,变化很快!
MySQL存储较大文件,博客,图片!数据库表很大,效率低,如果有一种数据库专门用来处理这种数据,MySQL压力就变得十分小(研究如何处理这些问题)大数据的IO压力下,表几乎没办法更改!
目前一个基本的互联网项目
为什么要用NoSQL
用户的个人信息,社交网络,地理位置,用户自己产生的数据,用户日志等爆发式增长!
这时候我们需要使用NoSQL数据库,NoSQL可以很好的处理以上情况!
什么是NoSQL
NoSQL
NoSQL = Not Only SQL(不仅仅是SQL)
关系型数据库:表格,行,列(POI)
泛指非关系型数据库,随着web2.0互联网诞生,传统的关系型数据库很难对付web2.0时代!尤其是超大规模的高并发的社区!暴露很多难以克服的问题,NoSQL在当今大数据环境下发展十分迅速,Redis是发展最快的,是当下必须要掌握的技术。
很多的数据类型,这些数据类型的的存储不需要一个固定的格式,不需要多余的操作就可以横向扩展!Map<String,Object>使用键值对来控制!
NoSQL特点
1、方便扩展(数据之间没有关系,很好扩展)
2、大数据量高性能(Redis 一秒8万次,读取11万,NoSQL的缓存记录级,是一种细粒度的缓存,性能比较高)
3、大数据类型是多样型的!(不需要事先设计数据库,随取随用,如果是数据库量十分大的表,很多人就无法设计了)
4、传统 RDBMS 和 NoSQL
传统的 RDBMS
- 结构化组织
- SQL
- 数据和关系都存在单独的表中
- 数据操作,数据定义语言
- 严格的一致性
- 基础的事务
- 。。。。。。
NoSQL
- 不仅仅是数据库
- 没有固定的查询语言
- 键值对存储,列存储,文档存储,图形数据库(社交关系)
- 最终一致性
- CAP 定理和 BASE(异地多活)
- 高性能,高可用,高扩展性
- 。。。。。。
真正的实践:NoSQL+RDBMS一起使用。
基本网站架构
- 1、商品的基本信息
名称、价格、商家信息:
关系型数据库就可以解决了,去IOE(IBM、Oracle、EMS)
- 2、商品的描述、评论(文字较多)
文档型数据库中,MongoDB
- 3、图片
分布式文件系统 FastDFS
- 淘宝自己的 TFS
- Google的 GFS
- Hadoop HDFS
- 阿里云的 OSS
- 4、商品的关键字(搜索)
- 搜索引擎 solr elasticsearch
- iSearch
- 5、商品热门的波段信息
内存数据库
Redis Tair Memache。。。
- 6、商品的交易,外部的支付接口
三方应用
NoSQl的四大分类
KV键值对:
- 新浪:Redis
- 美团:Redis + Tair
- 阿里、百度:Redis + memacache
文档型数据库(bson格式和json一样)
MongoDB(一般必须掌握)
- MongoDB是一个基于分布式文件存储的数据库,C++编写,主要用来处理大量的文档
- MongoDB是一个介于关系型数据库和非关系型数据库中间的产物,是非关系型数据库中功能最丰富,最像关系型数据库的!
ConthDB
列存储数据库
- HBase
- 分布式文件系统
图形关系数据库
- 不是存图形的,放的是关系,比如:朋友圈社交网络,广告推荐
- Neo4j,InfoGrid
本作品采用《CC 协议》,转载必须注明作者和本文链接