MySQL海量数据插入，导致服务器性能下降，怎么处理，急急急

只看该作者 · 发表于 2009-3-30 18:04:37

提示: 作者被禁止或删除内容自动屏蔽

kider · 发表于 2009-3-30 18:49:09

按照你的路子那就是调优了

可以设置commit不用那么频繁，日志批量刷到磁盘等

也主要看是ＣＰＵ瓶颈，还是IO瓶颈，先确定出问题来

可适当提高硬件配置等...

yueliangdao0608 · 发表于 2009-4-9 10:05:57

利用MYSQL51的分区也可以照样提高写性能。对于现有的表结构，适当的减少所用的索引会提高写性能。

hades · 发表于 2009-8-1 09:47:50

本人也用同样需求，单表月数据增量在8000，0000+，海量数据插入导致服务器资源耗尽，提高硬件不可能。
现在做MySQL一主多从的复制。。不知道以下想法可否实现？Master 数据的表没有索引，Slave 的同名表做索引做复制？

kider · 发表于 2009-8-4 17:51:24

应该是可行的...

yinshi · 发表于 2009-10-29 23:42:11

做RAID10,看看能不能使用更快的文件系统。数据一定要全部存到表里吗，没有适合存到文件里的信息吗？结合内存表小事务频繁提交。注意读写分离，考虑写入速度的表就不考虑索引了。方法很多。根据实际情况先定位瓶颈在哪里吧。

yinshi · 发表于 2009-10-29 23:46:22

大概算一下每秒写入多少数据，每条数据占用空间。需求的IOPS是否在硬件能够提供的IPOS之内。人只能做可以做的事。有一点，顺序写会比随机写快。

只看该作者 · 发表于 2009-11-14 14:01:51

提示: 作者被禁止或删除内容自动屏蔽

liyihongcug · 发表于 2010-2-1 18:39:41

一主多从的复制？？？

主从复制表数据很容易丢失的 (only table)

帐号		自动登录	找回密码
密码			注册

hxcfindjob 该用户已被删除	电梯直达 1^# 发表于 2009-3-30 18:04:37 \| 只看该作者 \|倒序浏览 \|阅读模式提示: 作者被禁止或删除内容自动屏蔽
hxcfindjob 该用户已被删除	分享到: QQ好友和群 QQ空间腾讯微博腾讯朋友微信收藏0 淘帖0 顶0 踩0
	回复使用道具举报提升卡置顶卡沉默卡喧嚣卡变色卡千斤顶显身卡