• 企业400电话
  • 微网小程序
  • AI电话机器人
  • 电商代运营
  • 全 部 栏 目

    企业400电话 网络优化推广 AI电话机器人 呼叫中心 网站建设 商标✡知产 微网小程序 电商运营 彩铃•短信 增值拓展业务
    Mysql大型SQL文件快速恢复方案分享

    前言

    在使用Mysql数据库的过程中,经常需要使用到备份和恢复数据库,最简单便捷的方法便是通过导出SQL数据文件和导入SQL数据文件来完成备份和恢复,但是随着项目的增长,数据量越来越大,每次恢复就成了一件很头疼的事情。

    当我最近一次拉下项目中的5GB大小的数据库到本地进行恢复时,竟然需要耗时40-50分钟,想着日后的数据扩增,数据量越来越大,恢复成本也越来越高,于是便查阅了一些资料,可以通过以下设置来提高你的恢复效率.

    1.更改备份参数

    首先我们需要在备份数据库的时候,可以通过更改参数来提高我们的恢复效率.

    mysqldump --extended-insert

    mysqldump的--extended-insert参数表示批量插入,会将多个insert语句合并成一个语句,与没有开启-extended-insert的备份导入效率相差3-4倍.

    使用--extended-insert=false导出的sql文件数据是这样的,每行一条insert语句,执行效率非常低下

    使用--extended-insert=true导出的表如下图这种,一个很长的insert语句,会进行批量插入。

    2.调整MYSQL快速插入参数

    如果你的数据库储存引擎是MYISAM参数的话,可以将此参数设置到512M或256M,MyISAM会使用一种特殊的树状缓存来做出更快的批量插入。

    相关文档:https://dev.mysql.com/doc/refman/5.7/en/server-system-variables.html#sysvar_bulk_insert_buffer_size

    该值默认是8M = 8388608byte

    查看插入缓冲区大小

    SHOW VARIABLES LIKE '%bulk%';

    设置插入缓冲区大小(全局)

    SET GLOBAL bulk_insert_buffer_size =1024*1024*512;

    设置插入缓冲区大小(session)

    SET bulk_insert_buffer_size =1024*1024*256;

    如果需要设置Mysql重新启动时,依然保留该值,需要将这段配置添加了my.cnf

    [mysqld]
    bulk_insert_buffer_size = 256M

    3.关闭检查项

    对于Innodb引擎中,我们可以关闭一些系统检查项来实现更快的插入的方案.

    //关闭自动提交
    SET autocommit=0;
    
    //关闭唯一检查
    set unique_checks = 0;
    
    //关闭外键检查
    SET foreign_key_checks=0;
    
    //备份的时候开启--extended-insert参数

    关于Innodb批量数据加载相关文档:https://dev.mysql.com/doc/refman/5.7/en/optimizing-innodb-bulk-data-loading.html

    4.实践

    做好以上优化后,你的Mysql恢复效率瞬间会提升一个档次,在没做以上参数优化时,每次恢复数据库都需要耗费40分钟的时间,设置后只需要16分钟左右,我的数据库文件容量在5GB左右.

    以上就这些,途观有更好的方案和建议的话,希望各位同学一起探讨,Happy Coding。

    总结

    以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对脚本之家的支持。

    您可能感兴趣的文章:
    • MySQL5.7 mysqldump备份与恢复的实现
    • MySQL 两种恢复数据的方法
    • MySQL单表恢复的步骤
    • MySQL数据库备份恢复实现代码
    • MySQL使用mysqldump+binlog完整恢复被删除的数据库原理解析
    • mysql数据备份与恢复实现方法分析
    • Window下如何恢复被删除的Mysql8.0.17 Root账户及密码
    • shell脚本实现mysql定时备份、删除、恢复功能
    • Mysql的Binlog数据恢复:不小心删除数据库详解
    • 从MySQL全库备份中恢复某个库和某张表的方法
    • MySQL 基于时间点的快速恢复方案
    上一篇:MySQL关于ERROR 1290 (HY000)报错解决方法
    下一篇:win10 64位 MySQL8.0下载和安装教程图解
  • 相关文章
  • 

    © 2016-2020 巨人网络通讯 版权所有

    《增值电信业务经营许可证》 苏ICP备15040257号-8

    Mysql大型SQL文件快速恢复方案分享 Mysql,大型,SQL,文件,快速,