MySQL 分库分表入门:为什么要分库分表?基础方案
前言单表数据量达到千万级后索引膨胀、查询变慢、备份恢复耗时巨大单纯索引优化无法解决。分库分表是海量数据终极扩容方案分为分表、分库、水平拆分、垂直拆分。一、为什么需要分库分表单表千万级数据BTree 索引层级变深查询 IO 暴涨单库磁盘、CPU、连接数存在硬件上限大批量 DML 操作锁表、锁行冲突严重并发性能差单库备份、恢复耗时极长故障影响范围大。二、两种拆分方案1. 垂直拆分分库按业务模块拆分数据库用户库、订单库、商品库。 优点业务隔离单库压力降低 缺点跨库 JOIN 无法直接执行需要代码关联。2. 水平拆分分表最常用同一业务表按规则拆分多张子表例如订单表拆分为 order_0 ~ order_15。 分片规则按用户 ID 取模分片按时间范围分片按月分订单。三、入门落地中间件Sharding-JDBCJava 客户端分库分表无需额外服务MyCat独立中间件代理层分片多语言项目通用。四、适用与不适用场景需要分库分表订单、日志、流水、用户行为数据单表超 500 万行。不需要分库分表小型后台、管理系统单表百万以内索引优化即可支撑。五、分片常见问题跨分片分页、排序、聚合复杂全局唯一 ID 需要分布式 ID 生成器事务仅支持分片内本地事务跨分片分布式事务成本高。

相关新闻

原型构建技术:AI模型token消耗优化策略与实践指南

原型构建技术:AI模型token消耗优化策略与实践指南

这次我们来看一个在AI模型应用中非常实用的技术策略——原型构建如何显著节省模型token消耗。对于经常使用大语言模型进行代码生成、文本创作或复杂任务处理的开发者来说,token成本控制是一个不可忽视的实际问题。 原型构建的核心思路是:在正式调用大模…

2026/10/15 11:23:31 阅读更多 →
嵌入式PSC寄存器深度解析:从原理到实战的低功耗电源管理

嵌入式PSC寄存器深度解析:从原理到实战的低功耗电源管理

1. 项目概述:为什么嵌入式开发者必须懂PSC 在嵌入式开发领域,尤其是面向电池供电的物联网设备、便携式医疗仪器或工业传感器节点时,功耗管理从来都不是一个“锦上添花”的选项,而是决定产品成败的核心指标。我经历过不止一个项目&…

2026/10/16 14:09:17 阅读更多 →
淘宝登录RSA加密逆向:Python复现password2参数生成全流程

淘宝登录RSA加密逆向:Python复现password2参数生成全流程

1. 项目概述:从登录框到加密黑盒做爬虫或者自动化测试的朋友,对淘宝登录这个“拦路虎”应该都不陌生。你兴冲冲地写好了脚本,模拟了点击,填好了用户名和密码,结果一提交,服务器告诉你密码错误。你明明输对了…

2026/10/16 16:11:28 阅读更多 →

最新新闻

深入浅出Linux网卡驱动:DMA、NAPI与多队列调优

深入浅出Linux网卡驱动:DMA、NAPI与多队列调优

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/17 6:04:33 阅读更多 →
glibc2.27堆题沙箱绕过:tcache、ORW和setcontext实战解析

glibc2.27堆题沙箱绕过:tcache、ORW和setcontext实战解析

从glibc 2.27开始,堆题的常规打法变得很机械:tcache几乎没有限制,double free和poisoning基本是“一键操作”。可一旦题目在堆漏洞外面又套了一层seccomp沙箱,整条利用链就得重新想。你辛辛苦苦把__free_hook改成了system&#xf…

2026/10/17 6:04:33 阅读更多 →
基于MP2642GR-Z与TM4C129EKCPDT的电池主动均衡方案设计与实现

基于MP2642GR-Z与TM4C129EKCPDT的电池主动均衡方案设计与实现

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/17 6:04:33 阅读更多 →
储能电池均衡方案选型与MP2642GR-Z+STM32实战

储能电池均衡方案选型与MP2642GR-Z+STM32实战

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/17 6:04:33 阅读更多 →
Matlab插值算法手写实验全解析:Lagrange、Newton与三次样条

Matlab插值算法手写实验全解析:Lagrange、Newton与三次样条

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/17 6:04:33 阅读更多 →
三角分解法与高斯迭代法:线性方程组求解的工程实现与排错指南

三角分解法与高斯迭代法:线性方程组求解的工程实现与排错指南

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/17 6:03:33 阅读更多 →

日新闻

DeepSeek选型与部署:V3/R1、Ollama、API全攻略

DeepSeek选型与部署:V3/R1、Ollama、API全攻略

简介:《DeepSeek使用方法.pdf》是一份面向DeepSeek入门及进阶用户的完整使用指南,重点围绕V3与R1两款模型的能力差异与适用场景展开,帮助读者根据任务类型与成本选择合适的模型。资源共1个PDF文件,压缩包大小约311KB,篇…

2026/10/17 0:00:25 阅读更多 →
200+Deepseek润色指令拆解:从底层原理到场景落地的完整指南

200+Deepseek润色指令拆解:从底层原理到场景落地的完整指南

简介:这是一份聚焦DeepSeek提示词优化的《200Deepseek润色指令》PDF文档,共收录两百余条可直接套用的润色指令,涵盖语法修正、风格统一、逻辑梳理、表达精炼等维度,并针对商务写作、学术论文、广告文案等场景给出差异化建议。文档…

2026/10/17 0:00:25 阅读更多 →
OpenCV轮廓法物体计数系统:轻量、可控、可落地的工业级实现

OpenCV轮廓法物体计数系统:轻量、可控、可落地的工业级实现

简介:本资源是一份基于OpenCV的本科课程设计完整报告,面向计算机视觉初学者、图像处理学习者及高校通信/信息类专业学生,解决物体智能计数与检测结果结构化记录的实际问题。项目覆盖图像预处理、轮廓检测、边界框绘制、轨迹栏交互式参数调节、…

2026/10/17 0:00:25 阅读更多 →

周新闻

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

流感时间序列预测实战:ARIMA/LSTM全流程拆解与避坑指南

简介:基于 ARIMA、LSTM、Transformer 等模型的流感时间序列预测 Python 源码,面向计算机相关专业课程设计与期末大作业学生,以及项目实战学习者。内容覆盖预处理、平稳性检验、定阶、残差分析、多模型对比预测的完整时序建模流程,…

2026/10/16 21:35:51 阅读更多 →
影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别

影刀RPA新手教程:键盘模拟输入实战——输入文本与模拟按键的区别 做影刀RPA自动化,十个新手有八个栽在"往输入框里填东西"这件事上:要么填不进去,要么填了一半,要么直接把原来内容追加在后面。这背后的根因&…

2026/10/17 1:44:59 阅读更多 →
影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容

影刀RPA新手教程:阅文起点小说数据采集实战——书籍信息与章节内容 1. 认识影刀:什么场景该用RPA采小说数据 起点中文网的页面结构相对稳定——分类榜单、书籍详情、章节内容三块独立页面,跳转链路清晰。这种场景非常适合影刀自动化&#x…

2026/10/16 15:04:24 阅读更多 →

月新闻

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/16 21:54:38 阅读更多 →
Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/16 3:49:43 阅读更多 →
黑夜航拍船只数据集训练YOLOV5模型全流程解析

黑夜航拍船只数据集训练YOLOV5模型全流程解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/16 14:23:36 阅读更多 →