• Nosql概述


    Nosql概述

    为什么使用noSql

    因为数据的访问量越来越大,单靠关系型数据库已经无法支撑用户需求,所以架构也在用户的需求下一步步进行演进。

    1、单机Mysql时代

    在这里插入图片描述

    90年代,一个网站的访问量一般不会太大,单个数据库完全够用。随着用户增多,网站出现以下问题

    • 数据量增加到一定程度,单机数据库就放不下了

    • 数据的索引(B+ Tree),一个机器内存也存放不下

    • 访问量变大后(读写混合),一台服务器承受不住。

    2、Memcached(缓存) + Mysql + 垂直拆分(读写分离)

    网站80%的情况都是在读,每次都要去查询数据库的话就十分的麻烦!所以说我们希望减轻数据库的压力,我们可以使用缓存来保证效率!

    在这里插入图片描述

    优化过程经历了以下几个过程:

    优化数据库的数据结构和索引(难度大)

    文件缓存,通过IO流获取比每次都访问数据库效率略高,但是流量爆炸式增长时候,IO流也承受不了

    MemCache,当时最热门的技术,通过在数据库和数据库访问层之间加上一层缓存,第一次访问时查询数据库,将结果保存到缓存,后续的查询先检查缓存,若有直接拿去使用,效率显著提升。

    3、分库分表 + 水平拆分 + Mysql集群

    在这里插入图片描述

    4、如今最近的年代

    如今信息量井喷式增长,各种各样的数据出现(用户定位数据,图片数据等),大数据的背景下关系型数据库(RDBMS)无法满足大量数据要求。Nosql数据库就能轻松解决这些问题。

    目前一个基本的互联网项目

    在这里插入图片描述

    为什么要用NoSQL ?

    用户的个人信息,社交网络,地理位置。用户自己产生的数据,用户日志等等爆发式增长!
    这时候我们就需要使用NoSQL数据库的,Nosql可以很好的处理以上的情况!

    什么是Nosql
    NoSQL = Not Only SQL(不仅仅是SQL)

    Not Only Structured Query Language

    关系型数据库:列+行,同一个表下数据的结构是一样的。

    非关系型数据库:数据存储没有固定的格式,并且可以进行横向扩展。

    nosql特点

    NoSQL泛指非关系型数据库,随着web2.0互联网的诞生,传统的关系型数据库很难对付web2.0时代!尤其是超大规模的高并发的社区,暴露出来很多难以克服的问题,NoSQL在当今大数据环境下发展的十分迅速,Redis是发展最快的。Nosql特点

    1. 方便扩展(数据之间没有关系,很好扩展!)
    2. 大数据量高性能(Redis一秒可以写8万次,读11万次,NoSQL的缓存记录级,是一种细粒度的缓存,性能会比较高!)
    3. 数据类型是多样型的!(不需要事先设计数据库,随取随用)
    4. 传统的 RDBMS 和 NoSQL
    传统的 RDBMS(关系型数据库)
    - 结构化组织
    - SQL
    - 数据和关系都存在单独的表中 row col
    - 操作,数据定义语言
    - 严格的一致性
    - 基础的事务
    - ...
    
    Nosql
    - 不仅仅是数据
    - 没有固定的查询语言
    - 键值对存储,列存储,文档存储,图形数据库(社交关系)
    - 最终一致性
    - CAP定理和BASE
    - 高性能,高可用,高扩展
    - ...
    

    了解:3V + 3高

    大数据时代的3V :主要是描述问题

    1. 海量Velume
    2. 多样Variety
    3. 实时Velocity

    大数据时代的3高 : 主要是对程序的要求

    1. 高并发
    2. 高可扩
    3. 高性能

    真正在公司中的实践:NoSQL + RDBMS 一起使用才是最强的。

    nosql四大分类

    KV键值对

    1. redis
    2. tair
    3. memcache

    文档型数据库

    1. mongoDB
      • 基于分布式文件存储的数据库。C++编写,用于处理大量文档。
      • MongoDB是RDBMS和NoSQL的中间产品。MongoDB是非关系型数据库中功能最丰富的,NoSQL中最像关系型数据库的数据库。
    2. ConthDB

    列存储数据库

    • HBase(大数据必学)
    • 分布式文件系统

    图关系数据库

    用于广告推荐,社交网络,实现知识图谱等

    • Neo4j、InfoGrid

    以阿里巴巴网站为例子,SQL和NOSQL的应用场景如下:

    # 商品信息
    - 一般存放在关系型数据库:Mysql,阿里巴巴使用的Mysql都是经过内部改动的。
    
    # 商品描述、评论(文字居多)
    - 文档型数据库:MongoDB
    
    # 图片
    - 分布式文件系统 FastDFS
    - 淘宝:TFS
    - Google: GFS
    - Hadoop: HDFS
    - 阿里云: oss
    
    # 商品关键字 用于搜索
    - 搜索引擎:solr,elasticsearch
    - 阿里:Isearch 多隆
    
    # 商品热门的波段信息
    - 内存数据库:Redis,Memcache
    
    # 商品交易,外部支付接口
    - 第三方应用
    

    Redis数据库是KV键值对型数据库。

    主要优点是:查找快

    缺点是:数据无结构化通常被当做字符串或者二进制数据。

    针对他的主要优点,最典型的应用场景是内容缓存,主要用于处理大量数据的高访问负载和一些日志系统等。

    推荐阅读:阿里云的这群疯子 https://yq.aliyun.com/articles/653511

  • 相关阅读:
    [BetterExplained]书写是为了更好的思考
    java 连接 mysql 数据库 ..password [yes]问题
    学习密度与专注力
    抠鼻屎的方法
    张飞流水账(摘)
    用 C 语言 连接 mysql (问题已解决)
    编程的首要原则(s)是什么?
    Tomat源码学习(二)(转载)
    [BetterExplained]为什么你应该(从现在开始就)写博客
    事件 代理 练习
  • 原文地址:https://www.cnblogs.com/iandf/p/14779432.html
Copyright © 2020-2023  润新知