当前位置:首页 > 单片机 > 架构师社区
[导读]来自:CSDN,作者:_陈哈哈链接:https://blog.csdn.net/qq_39390545/article/details/116248222一、朴实无华的-分表1、垂直分表2、水平分表二、花里胡哨的-分库3、垂直分库4、水平分库总结首先我们要知道分库、分表都是干啥的...

来自:CSDN,作者:_陈哈哈

链接:https://blog.csdn.net/qq_39390545/article/details/116248222

  • 一、朴实无华的 - 分表
    • 1、垂直分表
    • 2、水平分表
  • 二、花里胡哨的 - 分库
    • 3、垂直分库
    • 4、水平分库
  • 总结

首先我们要知道分库、分表都是干啥的,本文主角还是我们的MySQL为第一视角。首先从字面意思来看:

  • 分库:由单个数据库实例拆分成多个数据库实例,将数据分布到多个数据库实例中。
  • 分表:由单张表拆分成多张表,将数据划分到多张表内。
要知道,对于大型互联网项目,数据量级可能不是我们能想到的,每日新增数据量过千万是常有的事儿,想靠单台MySQL服务器是不现实的。你项羽在牛B,也顶不住四个队友挂机啊!!项羽:???

随着业务数据量和网站QPS日益增高,对数据库压力也越来越大,单机版数据库很快会到达存储和并发瓶颈,就需要做数据库性能方面的优化,分库分表采取的是分而治之的策略,分库目的是减轻单台MySQL实例存储压力及可扩展性,而分表是解决单张表数据过大以后查询的瓶颈问题,坦白说,这些问题也是所有关系型数据库的“硬伤”。

今天我们就基于常见分库、分表的策略方式以及场景,来搞清楚我们到底啥时候用的到。常用策略包括:垂直分表、水平分表、垂直分库、水平分库。

一、朴实无华的 - 分表

老大让我优化数据库,我上来就分库分表,他过来就是一jio。。。

1、垂直分表

垂直分表,或者叫竖着切表,是不是感受到该策略是以字段为依据的!主要按照字段的活跃性、字段长度,将表中字段拆分到不同的表(主表和扩展表)中。

特点:

  • 每个表的结构都不一样;
  • 每个表的数据也不一样,
  • 有一个关联字段,一般是主键或外键,用于关联兄弟表数据;
  • 所有兄弟表的并集是该表的全量数据;
场景 :

  1. 有几个字段属于热点字段,更新频率很高,要把这些字段单独切到一张表里,不然innodb行锁很恶心的,锁死你呀~~如用户表里的余额字段?不,我的余额就很稳定,一直是0。。
  2. 有大字段,如text,存储压力很大,毕竟innodb数据和索引是同一个文件;同时,我又喜欢用SELECT *,你懂得,这磁盘IO消耗的,跟玩儿似的,谁都扛不住的。
  3. 有明显的业务区分,或表结构设计时字段冗余;有些小伙伴看到第一点时,就发现陈哈哈是个菜鸡,用户表怎么会有余额字段?明显有问题啊!赶紧先到评论区喷陈哈哈一波~~然后笑嘻嘻的发现原来是个小尾巴,真不要脸是吧。。是的,因此不同业务我们要把具体字段拆开,这样才有利于业务后续扩展哦。

2、水平分表

水平分表,也叫“横着切”。。以行数据为依据进行切分,一般按照某列的自容进行切分。

如手机号表,我们可以通过前两位或前三位进行切分,如131、132、133 → phone_131、phone_132、phone_133,手机号有11位(100亿),量大是很正常的事儿,这年头谁家老头老太太每个手机呢是吧。这样切就把一张大表切成了好几十张小表,数据量不就下来了。有同学就问了那我怎么知道我这手机号查哪个表呢?一看你就没认真看前两行标红的点,为啥标红嘞?比如我查13100001111,那我截取前三位,动态拼接到查询的表名上,就行了。

特点:

  • 每个表的结构都一样;
  • 每个表的数据都不一样,没有交集;
  • 所有表的并集是该表的全量数据;
场景 :单表的数据量过大或增长速度很快,已经影响或即将会影响SQL查询效率,加重了CPU负担,提前到达瓶颈。记得水平分表越早越好,别问我为什么。。

二、花里胡哨的 - 分库

需要你注意的是,传统的分库和我们熟悉的集群、主从复制可不是一个事儿;多节点集群是将一个库复制成N个库,从而通过读写分离实现多个MySQL服务的负载均衡,实际是围绕一个库来搞的,这个库称为Master主库。而分库就不同了,分库是将这个主库一分为N,比如一分为二,然后针对这两个主库,再配置2N个从库节点。

3、垂直分库

纵向切库,太经典的切分方式,基于表进行切分,通常是把新的业务模块或集成公共模块拆分出去,比如我们最熟悉的单点登录、鉴权模块。熟悉的味道,记得有一次我把一些没用的表切到一个性能很好的服务器中,这服务器我专门用来学习,后来也不知被哪个狗腿子告密了~ 我**你个**,有种站出来,你个**东西。


老大让我优化数据库,我上来就分库分表,他过来就是一jio。。。特点:

  • 每个库的表都不一样;
  • 表不一样,数据就更不一样了~ 没有任何交集;
  • 每个库相对独立,模块化
场景 :可以抽象出单独的业务模块时,可以抽象出公共区时(如字典、公共时间、公共配置等),或者想有一台属于自己的服务器时?

4、水平分库

以行数据为依据,将一个库中的数据拆分到多个库中。大型分表体验一下?坦白说这种策略并不实用,因为会对后台开发很不友好,有很多坑,不建议采用,理解即可。

特点:

  • 每个库的结构都一样;
  • 每个库的数据都不一样,没有交集;
  • 所有库的并集是全量数据;
场景 :系统绝对并发量上来了,CPU内存压力大。分表难以根本上解决量的问题,并且还没有明显的业务归属来垂直分库,主库磁盘接近饱和。

总结

本文就到这里,希望你学废了!其实,在实际工作中,我们在选择分库分表策略前,想到的应该是从缓存、读写分离、SQL优化等方面,因为这些能够更直接、代价更小的解决问题。要记住动表就是动根本,你永远不知道这张表后面会连带多少历史遗留问题,如果是个很大型的项目,遇到些问题你就跟经理提议要分库分表,小心被呼死~

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除( 邮箱:macysun@21ic.com )。
换一批
延伸阅读

北京2026年7月17日 /美通社/ -- 近日,国际公认的测试、检验和认证机构SGS集团旗下SGS FIMKO OY(NB 0598)正式列入欧盟委员会公告机构数据库,成为《欧盟电池法规》(EU 2023/1542)框...

关键字: 电池 测试 供应链 数据库

从计算机科学的角度来看,该项目需要从特定地理坐标获取极光可见性数据。这对于创建一个能够随该山地当前极光状态动态变化的灯光场景至关重要。

关键字: LED灯带 API 数据库

北京——2026年5月8日 亚马逊云科技宣布,行业知名的社交娱乐公司HOLLA Group全面使用亚马逊云科技,依托亚马逊云科技覆盖全球的基础设施以及领先的AI技术,持续增强旗下实时视频社交平台的稳定运营、安全合规、内容...

关键字: AI 存储 数据库

济南2026年4月30日 /美通社/ -- 4月27日至28日,以"以开源之道,行致远之志"为主题的HOW2026中国数据库开源发展峰会暨PostgreSQL高峰论坛在济南成功举办。大会设置1场主论坛...

关键字: 开源 数据库 POSTGRESQL AI

济南2026年4月28日 /美通社/ -- 4月27日,以"以开源之道,行致远之志"为主题的HOW 2026 中国数据库开源发展峰会暨PostgreSQL高峰论坛在济南山东大厦隆重开幕。本次大会由开源...

关键字: 开源 数据库 POSTGRESQL 计算机

济南2026年4月24日 /美通社/ --4月28日至5月4日,2026数字中国建设峰会即将在福州隆重举行。作为峰会的重要组成部分,2026数字中国创新大赛•信创赛道全面升级,采用"行业赛+全国总决赛"...

关键字: 大赛 数据库 数据安全 医疗数据

上海2026年3月26日 /美通社/ -- 近日,立邦正式成为高端智能电动汽车品牌阿维塔的官方售后修补漆供应商。本次合作,立邦将环保涂装领域的技术积累导入阿维塔售后服务体系,提供从底到面的高性能水性修补漆解决方案与精准色...

关键字: 新能源汽车 数据库 智能电动汽车

在现代应用架构中,数据库连接池是提升系统性能、优化资源利用的关键组件。它通过复用数据库连接,避免了频繁创建和销毁连接带来的性能开销,同时能有效控制并发连接数,防止数据库因过载而崩溃。然而,连接池大小的设置是一项极具挑战性...

关键字: 数据库 数据

全新工具集加快设计进程、规避潜在错误,并简化测试全生命周期中的文档管理

关键字: 信号路由 电子测试 数据库

在互联网业务高速发展的背景下,单台MySQL数据库服务器往往难以应对日益增长的并发访问量与数据存储需求。主从复制架构作为MySQL内置的核心高可用方案,通过将数据从主服务器(Master)复制到一台或多台从服务器(Sla...

关键字: 数据库 存储
关闭