广告
返回顶部
首页 > 资讯 > 后端开发 > 其他教程 >数据库分库分表是什么,什么情况下需要用分库分表
  • 807
分享到

数据库分库分表是什么,什么情况下需要用分库分表

2024-04-02 19:04:59 807人浏览 独家记忆
摘要

目录数据量在什么情况下需要分表?1、oracle2、Mysql3、sqlserver分库分表是什么,什么情况下需要用分库分表1、什么是分库分表?2、什么情况下需要分库分表?3、分库分

数据量在什么情况下需要分表?

为了保证数据库的查询效率,当数据达成一定量时建议进行分表操作

1、oracle

当oracle单表的数据量大于2000万行时,建议进行水平分拆。

2、mysql

当mysql单表的数据量大于1000万行时,建议进行水平分拆。

单表容量到了1000W以上基本上稍微复杂一点的SQL都需要仔细优化,这时候的SQL耗时主要集中在磁盘io上,数据命令缓存的概率降低,总之不好搞,如果是正常的互联网项目,提前分库分表,在前期能做的先做了,后面会省很多时间处理数据迁移的事情,数据操作比较频繁,比如订单表,可能涉及到的插入和更新操作特别频繁,特别是大并发的时候,这时如果只用一个库,对磁盘的IO和mysql的性能都是一种考验,所以要分库分表,把操作频繁的表和基本信息表分开处理,减小单个数据库的压力,同时也不影响其他基本信息的读写

如果只有一台服务器,当select很多时,update和delete会被这些select访问中的数据堵塞,等待select结束,并发性能不高,此时就要选择读写分离了,主 库 负 责 写 , 从 库 负 责 读 \color{#FF0000}{主库负责写,从库负责读}主库负责写,从库负责读

具体情况根据数据库服务器的配置和架构有关,仅供参考

3、sqlserver

sqlserver一般如下条件就可以选择分区分表操作了

1、表的大小超过2GB。
2、表中包含历史数据,新的数据被增加都新的分区中。

当一个数据表的数据量达到千万级别以后,每次查询都需要消耗大量的时间,所以当表数据量达到一定量级后我们需要对数据表水平切割。水平分区分表就是把逻辑上的一个表,在物理上按照你指定的规则分放到不同的文件里,把一个大的数据文件拆分为多个小文件,还可以把这些小文件放在不同的磁盘下。这样把一个大的文件拆分成多个小文件,便于我们对数据的管理。 

分库分表是什么,什么情况下需要用分库分表

1、什么是分库分表?

顾名思义,即把存于一个库的数据分散到多个库中,把存于一个表的数据分散到多个表中。

2、什么情况下需要分库分表?

当一个数据库被创建之后,随着时间的推移和业务量的增加,数据库中表以及表中的数据量就会越来越多,就有可能出现两种弊端:(1)数据库的存储资源是有限的,其负载能力也是有限的,数据的大量积累肯定会导致其处理数据的能力下降;(2)数据量越多,那么对数据的增删改查操作的开销也会越来越大,所以,当出现如上两种情况,分库分表势在必行。

3、分库分表的方式

(1)垂直切分

适用场景:如果是因为表的个数多而让数据多,可以按照功能划分,把联系密切的表切分出来放在同一个库中(分库);

如果表的字段太多,可以以列为出发点,将字段进行拆分(分表);

(2)水平切分

适用场景:如果是因为表中的数据量过于庞大,则可以采用水平切分,按照某种约定好的规则将数据切分到不同的数据库中;

必须要根据当前数据库的情况做出合适的选择,也可以将两种情况结合在一起。

4、如何联合查找?

分库分表的结果会使数据分散,不好查询,主要有两种查询方式:

(1)、分步查:先查找主表,然后得到关联表的id,再发起请求得到关联数据;

(2)、联合查:同时发起多个查询请求,然后将所有的结果集合起来。 

到此这篇关于数据库分库分表是什么,什么情况下需要用分库分表的文章就介绍到这了,更多相关数据库分库分表内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

--结束END--

本文标题: 数据库分库分表是什么,什么情况下需要用分库分表

本文链接: https://www.lsjlt.com/news/122189.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • 数据库分库分表是什么,什么情况下需要用分库分表
    目录数据量在什么情况下需要分表?1、oracle2、mysql3、sqlserver分库分表是什么,什么情况下需要用分库分表1、什么是分库分表?2、什么情况下需要分库分表?3、分库分...
    99+
    2022-11-11
  • 数据库中在什么情况下需要用分库分表
    这篇文章主要介绍数据库中在什么情况下需要用分库分表,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!数据量在什么情况下需要分表?为了保证数据库的查询效率,当数据达成一定量时建议进行分表操作1、oracle当oracle单...
    99+
    2023-06-14
  • 什么情况下才考虑分库分表
    这篇文章主要讲解了“什么情况下才考虑分库分表”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“什么情况下才考虑分库分表”吧! 数据库瓶颈不管是IO瓶颈...
    99+
    2022-10-18
  • 数据库的分库分表需要注意什么
    这篇文章主要讲解了“数据库的分库分表需要注意什么”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“数据库的分库分表需要注意什么”吧!切入层次以下,范围界定在JA...
    99+
    2022-10-19
  • 需要分库分表的原因是什么
    这篇文章主要讲解了“需要分库分表的原因是什么”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“需要分库分表的原因是什么”吧!为什么要分库分表首先回答一下为什么要...
    99+
    2022-10-18
  • 数据库中​ 为什么需要拆分表
    小编给大家分享一下数据库中 为什么需要拆分表,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!数据库拆分表可分为水平拆分和垂直拆分,...
    99+
    2022-10-18
  • Oracle数据库出现锁表情况分析
    Oracle数据库出现锁表情况分析: -- 查询所有会话的状态、等待类型及当前正在执行的SQL脚本 select se.SID, se.SERIAL#, se.Status, se.Event, se.BLOCKING_SESS...
    99+
    2014-12-21
    Oracle数据库出现锁表情况分析 数据库入门 数据库基础教程 数据库 mysql
  • 数据库分表以及优化需要注意什么
    这篇文章给大家介绍数据库分表以及优化需要注意什么,内容非常详细,感兴趣的小伙伴们可以参考借鉴,希望对大家能有所帮助。  数据库设计时,为什么进行分表分库一般多少数据量开始分表分库分库分表的目的什么是数据库垂...
    99+
    2022-10-19
  • MySQL数据库中什么情况下需要使用索引
    这篇文章主要介绍MySQL数据库中什么情况下需要使用索引,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!什么情况下需要使用索引(1)列经常被用于where条件中(2)列中有大...
    99+
    2022-10-18
  • 数据库分库分表后非分片键怎么查询
    这篇文章主要介绍“数据库分库分表后非分片键怎么查询”,在日常操作中,相信很多人在数据库分库分表后非分片键怎么查询问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”数据库分库分表后...
    99+
    2023-03-13
    数据库
  • MySQL 分表分库怎么进行数据切分
    关系型数据库本身比较容易成为系统瓶颈,单机存储容量、连接数、处理能力都有限。当单表的数据量达到1000W或100G以后,由于查询维度较多,即使添加从库、优化索引,做很多操作时性能仍下降严重。此时就要考虑对其进行切分...
    99+
    2022-05-23
    MySQL 分表分库 MySQL 数据切分
  • 怎么用数据库中间件Mycat+SpringBoot完成分库分表
    这篇文章主要讲解了“怎么用数据库中间件Mycat+SpringBoot完成分库分表”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“怎么用数据库中间件Mycat+SpringBoot完成分库分表...
    99+
    2023-06-16
  • 怎么在MySQL数据库中实现分表分库操作
    这篇文章将为大家详细讲解有关怎么在MySQL数据库中实现分表分库操作,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。分表分库垂直拆分垂直拆分就是要把表按模块划...
    99+
    2022-10-18
  • Mysql数据库中的分库分表怎么利用MyBatis来实现
    本篇文章给大家分享的是有关Mysql数据库中的分库分表怎么利用MyBatis来实现,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。MyBatis实现分表最简单步骤我们模拟用户表数...
    99+
    2023-05-31
    mybatis mysql
  • SQLServer数据库创建数据仓库已分区表的意思是什么
    这篇文章主要介绍“SQLServer数据库创建数据仓库已分区表的意思是什么”,在日常操作中,相信很多人在SQLServer数据库创建数据仓库已分区表的意思是什么问题上存在疑惑,小编查阅了各式资料,整理出简单...
    99+
    2022-10-18
  • 怎么解决数据库分库分表无限扩容问题
    这篇文章主要讲解了“怎么解决数据库分库分表无限扩容问题”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“怎么解决数据库分库分表无限扩容问题”吧!单体应用每个创业...
    99+
    2022-10-19
  • mysql数据库切分是什么
    这篇文章主要介绍mysql数据库切分是什么,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!mysql数据库切分前言通过MySQLReplication功能所实现的扩展总是会受到数据库大...
    99+
    2022-10-18
  • 怎么在MySQL中分表分库时对数据进行切分
    今天就跟大家聊聊有关怎么在MySQL中分表分库时对数据进行切分,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。数据库分布式核心内容无非就是数据切分(Sharding)以及切分后对数据的...
    99+
    2023-06-14
  • MySQL中数据源管理和关系型分库分表以及列式库分布式计算分别指的是什么
    这篇文章将为大家详细讲解有关MySQL中数据源管理和关系型分库分表以及列式库分布式计算分别指的是什么,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。一、数据拆...
    99+
    2022-10-18
  • SQL Server数据库分页是什么
    这期内容当中小编将会给大家带来有关SQL Server数据库分页是什么,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。需求  这里以SQLServer的示例数据库North...
    99+
    2022-10-18
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作