开启辅助访问 切换到宽版

精易论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

用微信号发送消息登录论坛

新人指南 邀请好友注册 - 我关注人的新帖 教你赚取精币 - 每日签到


求职/招聘- 论坛接单- 开发者大厅

论坛版规 总版规 - 建议/投诉 - 应聘版主 - 精华帖总集 积分说明 - 禁言标准 - 有奖举报

查看: 416|回复: 11
打印 上一主题 下一主题
收起左侧

[讨论] MYSQL 500万行数据 单表IBD 300G 这个有什么好的优化方案?

[复制链接]
结帖率:95% (63/66)
跳转到指定楼层
楼主
发表于 昨天 13:50 | 只看该作者 |只看大图 回帖奖励 |正序浏览 |阅读模式   安徽省淮南市





数据量570万+ 单行字段longtext最大10MB+,表无主键直接默认插的 设计时候没有考虑到优化问题 现在单ibd接近300G了 想优化下不知道如何下手,尝试了AI的一些建议执行一条优化命令都几个小时没动静

对于这种数据你们会怎么处理?

签到天数: 10 天

11
发表于 昨天 19:36 | 只看该作者   重庆市重庆市
你现在首先要做的就是将ID字段,添加自增属性。然后再添加一些字段为索引字段。
自然使用效率就高很多。

不过,你最好是新建一张表来做。建好ID自增字段和索引后。
再将原数据拷过去,最好再将表更名。
回复 支持 反对

使用道具 举报

签到天数: 10 天

10
发表于 昨天 19:25 | 只看该作者   重庆市重庆市
本帖最后由 轻风影 于 2025-5-11 19:30 编辑

你这算啥,500万撒撒水啦,快5个亿了,都好用得很。
数据库索引和自增字段是必须的。
你重建有索引的表就是了。把原数据拷过去优化指令不是随便执行的,这个相当于重新建表+拷数据




点评

这个是正解   上海市上海市  发表于 5 小时前
回复 支持 反对

使用道具 举报

结帖率:85% (11/13)

签到天数: 9 天

9
发表于 昨天 19:20 | 只看该作者   天津市天津市
这还查什么,告诉老板 老数据崩了 换新盘
回复 支持 反对

使用道具 举报

签到天数: 1 天

8
发表于 昨天 17:54 | 只看该作者   广东省汕尾市
666666666666666666666666666
回复 支持 反对

使用道具 举报

结帖率:100% (1/1)

签到天数: 6 天

7
发表于 昨天 17:04 | 只看该作者   天津市天津市
cha询慢必须加大性能! 告诉老板 上硬件cpu  
回复 支持 反对

使用道具 举报

结帖率:39% (7/18)

签到天数: 3 天

6
发表于 昨天 16:55 | 只看该作者   浙江省杭州市
用java的se
回复 支持 反对

使用道具 举报

结帖率:92% (35/38)

签到天数: 1 天

地下
发表于 昨天 15:32 | 只看该作者   湖南省长沙市
你这个业务倒是好拆分。  比如  把这种不是时常需要读取的 大字段raw_html    拆分成副表。  等等需要的时候再去cha询就行了。  
回复 支持 反对

使用道具 举报

结帖率:92% (35/38)

签到天数: 1 天

地板
发表于 昨天 15:29 | 只看该作者   湖南省长沙市
㠫孬嫑夯芘 发表于 2025-5-11 14:22
重新创建一个一模一样的表,做好主键和索引的优化,然后用SQL软件,从旧表中导出数据,再导入到新表里面去 ...

3亿  这特么还查的动?   带点条件 就没法cha询了
回复 支持 反对

使用道具 举报

结帖率:100% (27/27)

签到天数: 5 天

板凳
发表于 昨天 15:22 | 只看该作者   辽宁省大连市
你用到了text 说明你单字段数据很大  即使做了索引  cha询也是很慢很慢的  
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则 致发广告者

发布主题 收藏帖子 返回列表

sitemap| 易语言源码| 易语言教程| 易语言论坛| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论,本站内容均为会员发表,并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的,严禁用于非法目的,否则造成一切后果自负!如帖子内容侵害到你的权益,请联系我们!
防范网络诈骗,远离网络犯罪 违法和不良信息举报电话0663-3422125,QQ: 793400750,邮箱:[email protected]
网站简介:精易论坛成立于2009年,是一个程序设计学习交流技术论坛,隶属于揭阳市揭东区精易科技有限公司所有。
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备12094385号-1) 粤公网安备 44522102000125 增值电信业务经营许可证 粤B2-20192173

快速回复 返回顶部 返回列表