博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
【分布式架构之旅 理论篇】数据库分库分表
阅读量:6228 次
发布时间:2019-06-21

本文共 768 字,大约阅读时间需要 2 分钟。

###前言

储备知识ing,很久之前写的。

###MySQL集群 MySQL官方提供的是mysql-proxy方案,主要解决了高并发的问题,但是没有解决高可用的问题。一般项目都是读多写少。读的操作让mysql-slave去处理,写的操作让mysql-master去处理,这减少对主库的访问压力。高可用问题体现在mysql-proxy宕了和单点故障(如果我mysql-master出现了故障,那一切不就GG了)方面。

###什么是分库分表 把原本存储于一个库的数据分块存储到多个库上,把原本存储于一个表的数据分块存储到多个表上。

##为什么要分库分表 数据库中的数据量不一定是可控的,在未进行分库分表的情况下,随着时间和业务的发展,库中的表会越来越多,表中的数据量也会越来越大,对应着,CRUD的数据操作开销也会越来越大。服务器的资源(CPU、磁盘、内存、IO等)是有限的,最终数据库所能承载的数据量、数据处理能力将会遭遇瓶颈。

###分库分表的种类

  • 垂直分割:将一个属性比较多、行的数据比较大的表、把这个表的不同属性进行拆分成不同表。因此来降低单库(表)大小的目的来提高性能。

    • 每个库(表)的结构都不一样。
    • 每个库(表)的数据至少有一列是一样的。
    • 每个库(表)的并集是全量数据。
  • 水平分割:以某个字段按照一定的规律(取模)将数据分割到多个库(表)中。

    • 每个库(表)的结构都是一样。
    • 每个库(表)的数据都不一样。
    • 每个库(表)的并集是全量数据。

###分库策略

  • Hash取模,通过表的一列字段进行hash取code%1024.

  • Range范围取模,比如2016年的数据放到A库,2017年的数据放到B库。

  • List预定义

###分库分表存在的问题

  • 多数据源的管理

  • 跨库事务的处理(伸缩性差)

  • 查询数据结果的结果集合并

  • 分布式全局唯一的id

转载地址:http://bpnna.baihongyu.com/

你可能感兴趣的文章
leetcode第一刷_Same Tree
查看>>
高速排序之算法导论实现
查看>>
$.post()提交了数据,return不给跳转
查看>>
检测和删除多余无用的css
查看>>
pip安装使用详解【转】
查看>>
Mybatis 中延时加载
查看>>
小程序追加数据的实现方法
查看>>
固本清源
查看>>
浅谈我对机器学习的理解--李航博士
查看>>
Execution Plan 执行计划介绍
查看>>
Web API应用架构设计分析(1)
查看>>
聊聊连接池和线程
查看>>
Python——正則表達式(2)
查看>>
适合新人学习的iOS官方Demo
查看>>
拉开大变革序幕(下):分布式计算框架与大数据
查看>>
AndroidStudio 使用AIDL
查看>>
H.264 RTPpayload 格式------ H.264 视频 RTP 负载格式(包含AAC部分解析)
查看>>
poj 3468 A Simple Problem with Integers 【线段树-成段更新】
查看>>
HDU 4287-Intelligent IME(哈希)
查看>>
CentOS---网络配置详解
查看>>