百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

MySQL分区和分表的区别与联系(mysql分区表是什么意思)

wxin55 2024-11-14 18:43 11 浏览 0 评论

一、分区和分表简介

  • 分表

    就是将一张大表分成N个小表。

  • 分区

    将一张大表的数据分成N个区块,这些区块可以在同一个磁盘上,也可以在不同的磁盘上。

二、分区和分表的区别

1. 实现方式

1.1 分表

MySQL的分表是真正的分表,将一张大表分成若干个小表之后,每个小表都是完整的一张表,都对应三个文件(以MyISAM存储引擎为例):

  • .MYD文件:数据文件;

  • .MYI文件:索引文件;

  • .FRM文件:表结构文件。

如下图所示:

上述的分表使用MERGE存储引擎(MyISAM存储引擎的分表变种)。alluser是总表,它下面有三个分表,user1user2user3。这三个子表都是独立的表,读取数据的时候,我们可以通过总表来取数据。

由上图可知,三个子表的.MYD(数据)和.MYI(索引)文件并没有存储在数据库指定的数据目录(Data Directory)中,而是存储在各自指定的目录中,然后在数据目录中创建相应的软链接指向它们。实际上,MySQL支持将分表的相关文件分散存储在不同的磁盘和分区中,对于拥有多个磁盘的数据库服务器来说,无疑能够充分利用多个磁盘的I/O性能。

由上图还可知,总表是没有.MYD.MYI文件的,也就是说,总表并不会存储任何数据和索引,这些都存储在各个分表的相关文件之中。总表的.MRG文件存储的内容如下图所示:

显而易见,alluser.MRG文件存储的是分表的表名,以及插入数据的方式。此处,可以把总表理解成一个外壳,或者是连接池。关于MyISAM存储引擎的分表机制,请参考:

使用MERGE存储引擎实现MySQL的分表机制

1.2 分区

将一张大表分区之后,它还是一张表,不会变成多张表,但是它存放数据的区块变多了。如下图所示:

由上图可知,分区文件的文件名格式为:

索引文件名称:表名#P#分区名.MYI 数据文件名称:表名#P#分区名.MYD

示例中的big_table表被分为四个分区,分别是part0、part1、part2和part3。这四个分区的.MYD(数据)和.MYI(索引)文件也可以分散存储在不同的目录、分区或磁盘中,然后在数据库指定的数据目录(Data Directory)中创建软链接指向这些文件。对于拥有多个磁盘的数据库服务器来说,无疑能够充分利用多个磁盘的I/O性能。

除了上述四个分区的相应文件之外,数据库还会创建一个.par文件。这个文件类似于分表中的.MRG文件,用于存储这张表的分区信息,其内容如下所示:

关于MyISAM存储引擎的分区机制,请参考:

MySQL :: MySQL 5.1 partitions in practice

http://mirror.metrocast.net/mysql/tech-resources/articles/testing-partitions-large-db.html

2. 数据处理

2.1 分表

分表之后,数据都是存放在分表里的,总表只是一个外壳,存取数据发生在一个一个的分表里面。看下面的例子:

select * from alluser where id='12';

表面上看,是对表alluser进行操作的,实际并不是的,而是对alluser里面的分表进行了操作。

2.2 分区

分区不存在分表的概念,分区只不过把存放数据的文件分割成了许多小块,分区后的表仍然是一张表,数据处理还是由自己来完成。

3. 性能提升

3.1 分表

分表之后,单表的并发能力提高了,磁盘I/O性能也提高了。并发能力为什么会提高呢?因为查询一次所花的时间变短了,如果出现高并发的话,总表可以根据不同的查询,将并发压力分散到不同的小表里面。磁盘I/O性能为什么会提高呢?因为本来一个非常大的.MYD(数据)文件现在也分散到各个小表的.MYD(数据)文件中去了。

3.2 分区

MySQL提出了分区的概念,就是想要突破磁盘I/O瓶颈,想要提高磁盘的读写能力,借此提高MySQL的性能。在这一点上,分区和分表的测重点不同:分表的重点是存取数据时,如何提高MySQL的并发能力;分区则偏重于如何突破磁盘的读写能力,从而达到提高MySQL性能的目的。

4. 实现难度

4.1 分表

分表的方法有很多,用MERGE存储引擎来分表,是最简单的一种方式。这种方式和分区难易度差不多,并且对应用代码来说可以做到透明的。如果是用其他分表方式就比分区麻烦了。

4.2 分区

分区实现是比较简单的,建立分区表和建立普通的表没有什么区别,并且对于应用代码来说是透明的。

三、分区和分表的关系

  • 都能够提高MySQL的性能,分表能够改善高并发的性能,分区能够充分利用磁盘的I/O吞吐率。

  • 分表和分区并不矛盾,而是可以相互配合的。对于那些访问量比较大,并且数据量比较多的表,可以采取分表和分区结合的方式(如果MERGE存储引擎的分表方式不能和分区配合的话,也可以使用其他的分表方式)。对于访问量不大,但是数据量比较多的表,可以只采取分区的方式。

相关推荐

ES6中 Promise的使用场景?(es6promise用法例子)

一、介绍Promise,译为承诺,是异步编程的一种解决方案,比传统的解决方案(回调函数)更加合理和更加强大在以往我们如果处理多层异步操作,我们往往会像下面那样编写我们的代码doSomething(f...

JavaScript 对 Promise 并发的处理方法

Promise对象代表一个未来的值,它有三种状态:pending待定,这是Promise的初始状态,它可能成功,也可能失败,前途未卜fulfilled已完成,这是一种成功的状态,此时可以获取...

Promise的九大方法(promise的实例方法)

1、promise.resolv静态方法Promise.resolve(value)可以认为是newPromise方法的语法糖,比如Promise.resolve(42)可以认为是以下代码的语...

360前端一面~面试题解析(360前端开发面试题)

1.组件库按需加载怎么做的,具体打包配了什么-按需加载实现:借助打包工具(如Webpack的require.context或ES模块动态导入),在使用组件时才引入对应的代码。例如在V...

前端面试-Promise 的 finally 怎么实现的?如何在工作中使用?

Promise的finally方法是一个非常有用的工具,它无论Promise是成功(fulfilled)还是失败(rejected)都会执行,且不改变Promise的最终结果。它的实现原...

最简单手写Promise,30行代码理解Promise核心原理和发布订阅模式

看了全网手写Promise的,大部分对于新手还是比较难理解的,其中几个比较难的点:状态还未改变时通过发布订阅模式去收集事件实例化的时候通过调用构造函数里传出来的方法去修改类里面的状态,这个叫Re...

前端分享-Promise可以中途取消啦(promise可以取消吗)

传统Promise就像一台需要手动组装的设备,每次使用都要重新接线。而Promise.withResolvers的出现,相当于给开发者发了一个智能遥控器,可以随时随地控制异步操作。它解决了三大...

手写 Promise(手写输入法 中文)

前言都2020年了,Promise大家肯定都在用了,但是估计很多人对其原理还是一知半解,今天就让我们一起实现一个符合PromiseA+规范的Promise。附PromiseA+规范地址...

什么是 Promise.allSettled()!新手老手都要会?

Promise.allSettled()方法返回一个在所有给定的promise都已经fulfilled或rejected后的promise,并带有一个对象数组,每个对象表示对应的pr...

前端面试-关于Promise解析与高频面试题示范

Promise是啥,直接上图:Promise就是处理异步函数的API,它可以包裹一个异步函数,在异步函数完成时抛出完成状态,让代码结束远古时无限回掉的窘境。配合async/await语法糖,可...

宇宙厂:为什么前端离不开 Promise.withResolvers() ?

大家好,很高兴又见面了,我是"高级前端进阶",由我带着大家一起关注前端前沿、深入前端底层技术,大家一起进步,也欢迎大家关注、点赞、收藏、转发。1.为什么需要Promise.with...

Promise 新增了一个超实用的 API!

在JavaScript的世界里,Promise一直是处理异步操作的神器。而现在,随着ES2025的发布,Promise又迎来了一个超实用的新成员——Promise.try()!这个新方法简...

一次搞懂 Promise 异步处理(promise 异步顺序执行)

PromisePromise就像这个词的表面意识一样,表示一种承诺、许诺,会在后面给出一个结果,成功或者失败。现在已经成为了主流的异步编程的操作方式,写进了标准里面。状态Promise有且仅有...

Promise 核心机制详解(promise机制的实现原理)

一、Promise的核心状态机Promise本质上是一个状态机,其行为由内部状态严格管控。每个Promise实例在创建时处于Pending(等待)状态,此时异步操作尚未完成。当异步操作成功...

javascript——Promise(js实现promise)

1.PromiseES6开始支持,Promise对象用于一个异步操作的最终完成(包括成功和失败)及结果值的表示。简单说就是处理异步请求的。之所以叫Promise,就是我承诺,如果成功则怎么处理,失败怎...

取消回复欢迎 发表评论: