千万级数据量表,快速添加索引思路!

肉眼品世界

共 1243字,需浏览 3分钟

 ·

2021-03-07 11:52

点击蓝色“肉眼品世界”关注我哟

深度价值体系传递

来源:https://www.jb51.net/article/103692.htm

最近遇到的一个问题,需要在一张将近1000万数据量的表中添加加一个字段,但是直接添加会导致mysql 奔溃,所以需要利用其他的方法进行添加,这篇文章主要给大家介绍了MySQL中大数据表增加字段的实现思路,需要的朋友可以参考借鉴。

前言

增加字段相信大家应该都不陌生,随手就可以写出来,给 MySQL 一张表加字段执行如下 sql 就可以了:

ALTER TABLE tbl_tpl ADD title(255DEFAULT '' COMMENT '标题' AFTER id;

但是线上的一张表如果数据量很大呢,执行加字段操作就会锁表,这个过程可能需要很长时间甚至导致服务崩溃,那么这样操作就很有风险了。

给 MySQL 大表加字段的思路

① 创建一个临时的新表,首先复制旧表的结构(包含索引)

create table new_table like old_table;

② 给新表加上新增的字段
③ 把旧表的数据复制过来

insert into new_table(filed1,filed2…) select filed1,filed2,… from old_table

④ 删除旧表,重命名新表的名字为旧表的名字

不过这里需要注意,执行第三步的时候,可能这个过程也需要时间,这个时候有新的数据进来,所以原来的表如果有字段记录了数据的写入时间就最好了,可以找到执行这一步操作之后的数据,并重复导入到新表,直到数据差异很小。不过还是会可能损失极少量的数据。

所以,如果表的数据特别大,同时又要保证数据完整,最好停机操作。

另外的方法

  1. 在从库进行加字段操作,然后主从切换

  2. 使用第三方在线改字段的工具

一般情况下,十几万的数据量,可以直接进行加字段操作。

总结

以上就是关于在MySQL大表中加字段的实现思路,希望本文的内容对大家的学习或者工作能带来一定的帮助,如果有疑问大家可以留言交流。

推荐阅读:

【重磅分享】从零到一搭建推荐系统指南白皮书.pdf(附48页下载链接)

亿级(无限级)并发,没那么难

世界的真实格局分析,地球人类社会底层运行原理

数据中台:基于标签体系的360°用户画像

不是你需要中台,而是一名合格的架构师(附各大厂中台建设PPT)

【干货】爱奇艺推荐中台探索与实践.pdf(附下载链接)

字节跳动MySQL学习笔记火了,完整版开放下载!

浏览 19
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报