「职场面试」数据库常见面试题 (二)-MySQL分库分表
wptr33 2025-03-13 21:06 22 浏览
上期我们讲了索引,MyISAM和InnoDB的选择等相关的数据库面试题目,小伙伴们掌握得怎么样了?这期树懒君决定分享一下分库分表方面的面试题目,这是一个很经典的面试问题哦~
首先,要知道分库分表是两回事儿,大家可别搞混了,可能是光分库不分表,也可能是光分表不分库,都有可能。下面直接上问题!
1.分区方案有哪些?
分区表是由多个相关的底表实现的。这些基础表也由句柄对象表示,因此我们也可以直接访问各个区域,存储引擎管理区域的各个基础表与管理普通表相同(所有基础表都必须使用相同的存储引擎),区域表的索引只是在各个基础表相同的索引。该方案屏蔽了用户的细节,即使查询条件没有sharding column,也能正常工作。
2.MySQL分区能做什么?
- 分割逻辑数据
- 提高单一的写作和阅读应用速度。
- 提高分区范围阅读查询速度。
- 分割数据能够有多个不同的物理文件路径
- 高效保存历史数据。
3.分区的类型
- RANGE区域:根据给定连续区间的列值,将多行分配给区域。mysql根据指定的分割战略,将数据放入不同的表格文件中。相当于文件,被拆成小块。但是,对外给顾客的感觉是表,是透明的。
- 根据range,每个库的连续数据,这一般在时间范围内,如交易表、销售表等,可以根据年月保管数据。可能会出现热点问题,大量的流量都在最新数据上。
- 分range的好处是,扩张时很简单。
- 类似于RANGE分区,每个分区都必须明确定义。其主要区别在于,LIST分区中每个分区的定义和选择是基于某个列的值从属于一个列的值集中在一个列的值中,而RANGE分区从属于一个连续区间值集中在一起。
- 根据用户定义的表现式回归值进行选择的区域,将该表现式插入表中的列值进行计算。该功能包括MySQL中有效、产生非负整数值的表现。
- hash分发的优点是,可以平均分配各仓库的数据量和请求压力的缺点是扩麻烦,有数据转移的过程,以前的数据需要重新计算hash值,重新分配到不同的库和表。
- KEY分区:类似于HASH区域,KEY区域只支持计算一列或多列,MySQL服务器提供自己的哈希函数。必须有一列或多列包含整数值。
4.为什么大部分互联网不使用分区,而是自己分库分表?
许多资源受单体限制,如连接数量、网络吞吐等。如何进行隔断,在实际应用中是十分关键的要素之一。
5.为什么要分库分表?
从性能上看
随着单库数据量越来越大,数据库查询QPS越来越高,数据库读写所需的时间也越来越多。数据库的读写性能可能成为业务发展的瓶颈。相应地,需要优化数据库的性能。本文只讨论数据库水平的优化,不讨论缓存等应用水平的优化手段。
如果数据库查询QPS过高,就需要考虑拆库,通过分库分担单个数据库的连接压力。例如,如果查询QPS为3500,假设单个库可以支持1000个连接数,则可以考虑将其分成4个库来分散查询连接压力。
单表数据量过大时,数据量超过一定量级后,无论是数据查询还是数据更新,在索引优化等纯数据库水平的传统优化手段后,都可能存在性能问题。这是量的变化产生了质的变化。此时,有必要改变解决问题的想法。例如,从数据生产的源头、数据处理的源头解决问题。既然数据量很大,我们就分别治疗,成零。这产生了分钟,将数据按照一定的规则分成多个钟表,解决了在钟表环境下无法解决的访问性能问题。
从可用性上看
如果单个数据库发生事故,很可能会丢失所有数据。特别是在云时代,许多数据库都在虚拟机上行驶。如果虚拟机/宿主机发生事故,可能会造成无法挽回的损失。因此,除了传统的Master-Slave、Master-Master等部署水平,还可以考虑从数据分割水平解决这个问题。
此处我们以数据库宕机为例:
- 单库部署情况下,如果数据库宕机,那么故障影响就是100%,而且恢复可能耗时很长。
- 如果我们拆分成2个库,分别部署在不同的机器上,此时其中1个库宕机,那么故障影响就是50%,还有50%的数据可以继续服务。
- 如果我们拆分成4个库,分别部署在不同的机器上,此时其中1个库宕机,那么故障影响就是25%,还有75%的数据可以继续服务,恢复耗时也会很短。
当然,我们也不能无限制的拆库,这也是牺牲存储资源来提升性能、可用性的方式,毕竟资源总是有限的。
6. 如何分库分表(分库?分表?还是既分库又分表?)
分库分表方案可以分为下面3种
7. 如何对数据进行切分?
通常根据垂直拆分、水平拆分两种方式进行划分,当然,一些复杂的业务场景也可能选择两者结合的方式。
垂直拆分
垂直分表通常根据业务功能的使用频率,将主要受欢迎的字段放在一起作为主要表。然后,将不常用的东西根据各自的业务属性聚集起来,分成不同的次要表的主要表和次要表的关系一般是一对一的。
水平拆分(数据分片)
单表容量不超过500W,否则建议分级。将一块手表复制成同一块手表结构的不同手表,按照一定的规则将数据分别保存在这些手表中,保证手表的容量不太大,提高性能的当然,这些结构相同的手表可以放在一个或多个数据库中。
水平分割的几种方法:
- 使用MD5哈希,加密UIDmd5,取前几名(在这里取前两名),然后将不同的UID哈希放入不同的用户表中。
- 根据时间可以放入不同的表。例如,article_201601、article_201602。
- 按热度拆分,点击率高的词条生成各自的表,低热的词条放在大表中,低热的词条达到一定的贴数后,将低热的表单独分割成表。
- 根据ID的值加入对应的表格,第一个表格user_0000,第二个100万用户数据加入第二个表格user_0001,随着用户的增加,直接加入用户表格即可。
欢迎点击下方“了解更多”
相关推荐
- 编程经典案例:当线程遇到For循环,一个不可思议的Bug就出现了!
-
我们公司有个项目,需要视觉定位,大致就是在产品上会有一个“十字”形状的Mark标记,然后通过视觉相机连续拍照,然后将拍到的图片进行视觉算法运算,最终得出Mark标记的位置,然后根据其位置对设备进行位置...
- js中的for循环(js中for循环执行机制)
-
(for循环):for循环-语法:for(①初始化表达式;②条件表达式;④更新表达式){③语句...}...
- VUE循环语句的使用(v-for)(vuefor循环的key)
-
对数组进行遍历使用v-for进行遍历时注意参数格式,以“siteinsites”的格式填入参数,sites是被遍历的数据,site是遍历出的值。...
- 【200915】编程入门第五课,循环语句
-
介绍介绍...
- Linux,shell四种循环结构,for、while、until、select代码案例
-
Shell循环结构循环结构程序中使用循环就是模拟做重复的事情,一般情况下,语言都有循环语句,shell支持4种循环:for、while、until和select。...
- Python 中的 for 和 while 循环(for和while循环的区别python)
-
Python中的for和while循环<>6分钟阅读...
- 《循环(for/while)》(循环while语句)
-
循环(for/while)循环是编程中处理重复任务的核心工具,Python提供了两种主流循环结构:for循环(遍历可迭代对象)和while循环(根据条件重复执行)。本节将系统讲解两者的语法、使用场景及...
- Python学习记录(22)——for-in循环的学习
-
Python学习记录(22)——for-in循环的学习大家好,上一节课我们学习了Python学习记录(21)——while循环...
- 改几行代码,for循环耗时从3.2秒降到0.3秒,真正看懂的都是牛人
-
本文讲解一个非常重要的性能调优方法,会涉及到CPU内部非常重要的一些基础知识,为讲解清楚,篇幅较长,请务必看完,你一定会有收获!...
- Shell脚本小白教程 for循环(shell编程之for循环)
-
需求循环遍历for循环变量1、创建脚本touchfor.sh2、编辑脚本...
- PLC编程For循环:告别重复代码编程效率翻倍(附带注释案例)
-
一、For循环基础结构FOR循环变量:=起始值TO终止值BY步长DO//循环执行的代码END_FOR;...
- for...in 循环的坑,别再用它遍历 JavaScript 数组了!
-
在JavaScript开发中,...
- VBA代码实例之For循环嵌套的魅力(vba for条件循环嵌套)
-
第一种方法是用active插件复制这段代码:DimxAsInteger...
- Java循环:for、foreach与stream性能对比
-
性能比较如果数据在1万以内的话,for循环效率高于foreach和stream;如果数据量在10万的时候,stream效率最高,其次是foreach,最后是for。...
- 西门子博途SCL高级语言之FOR循环(西门子博途for循环语句编程)
-
FOR循环语句应用一1.)FOR循环语句介绍说明使用“在计数循环中执行”指令,重复执行程序循环,直至运行变量不在指定的取值范围内。也可以嵌套程序循环。在程序循环内,可以编写包含其它运行变量的其它程序...
- 一周热门
-
-
因果推断Matching方式实现代码 因果推断模型
-
C# 13 和 .NET 9 全知道 :13 使用 ASP.NET Core 构建网站 (1)
-
git pull命令使用实例 git pull--rebase
-
git 执行pull错误如何撤销 git pull fail
-
面试官:git pull是哪两个指令的组合?
-
git pull 和git fetch 命令分别有什么作用?二者有什么区别?
-
git fetch 和git pull 的异同 git中fetch和pull的区别
-
git pull 之后本地代码被覆盖 解决方案
-
还可以这样玩?Git基本原理及各种骚操作,涨知识了
-
git命令之pull git.pull
-
- 最近发表
-
- 编程经典案例:当线程遇到For循环,一个不可思议的Bug就出现了!
- js中的for循环(js中for循环执行机制)
- VUE循环语句的使用(v-for)(vuefor循环的key)
- 【200915】编程入门第五课,循环语句
- Linux,shell四种循环结构,for、while、until、select代码案例
- Python 中的 for 和 while 循环(for和while循环的区别python)
- 《循环(for/while)》(循环while语句)
- Python学习记录(22)——for-in循环的学习
- 改几行代码,for循环耗时从3.2秒降到0.3秒,真正看懂的都是牛人
- Shell脚本小白教程 for循环(shell编程之for循环)
- 标签列表
-
- git pull (33)
- git fetch (35)
- mysql insert (35)
- mysql distinct (37)
- concat_ws (36)
- java continue (36)
- jenkins官网 (37)
- mysql 子查询 (37)
- python元组 (33)
- mybatis 分页 (35)
- vba split (37)
- redis watch (34)
- python list sort (37)
- nvarchar2 (34)
- mysql not null (36)
- hmset (35)
- python telnet (35)
- python readlines() 方法 (36)
- munmap (35)
- docker network create (35)
- redis 集合 (37)
- python sftp (37)
- setpriority (34)
- c语言 switch (34)
- git commit (34)