有做过海量数据的朋友进来指导一下拉,效率问题
最近手头有一个批量数据录入的工作,数据大概有5000W条左右,现在每个小时只能插入2W条左右,太慢了,有经验的分享一下
怎样提高一下效率?
大家都有哪些方法,分享一下.
------解决方案--------------------
如需要阅读该回复,请登录或注册CSDN!
------解决方案--------------------1.批处理。可以测试下一次处理多少条效率最高
2.尽量简化字段,插入的代码最小
3.数据库服务器要购入高配置的!
4.考虑白天有人使用导致速度慢,可以考虑夜深人静的时候自动跑