博客
关于我
mysql 数据库备份及ibdata1的瘦身
阅读量:794 次
发布时间:2023-02-10

本文共 3533 字,大约阅读时间需要 11 分钟。

mysql 数据库备份及ibdata1的瘦身

昨天做一大数据量的测试后,发现中途报错,最后查明是由于磁盘空间不足所致。经检查发现,Mysql的ibdata1单个文件就占用了80G,传言说ibdata1是InnoDB的产物,而且只会增大不会减少。这次被碰到不得不解决了,上网搜了一下解决方法。大体思路就是备份数据,然后删除数据库再还原数据库。

由于这台机上有N个项目的数据库,每敲一个命令都命人心惊胆战。生怕弄错命令后导致全盘数据丢失。可恨的是参数的那篇文件里备份的参数里少了‘存储过程’的备份。让我苦恼万分!如今记下修正后的瘦身大法:

备份数据库

/usr/local/mysql/bin/mysqldump -uDBuser -pPassword --quick --force --routines --add-drop-database --all-databases --add-drop-table > /data/bkup/mysqldump.sql

注意事项:

  • 备份前可以用MySQLAdministrator看一下当前数据库里哪些表占用空间大,把一些不必要的给truncate table掉。这样既省些空间又省些时间。
  • mysqldump的参数选择要谨慎,尤其是涉及存储过程和触发器时,建议先熟悉参数说明。
  • 停止数据库

    service mysqld stop

    删除这些大文件

    rm /usr/local/mysql/var/ibdata1rm /usr/local/mysql/var/ib_logfile*

    手动删除除Mysql之外所有数据库文件夹,然后启动数据库

    service mysqld start

    还原数据

    /usr/local/mysql/bin/mysql -uroot -phigkoo < /data/bkup/mysqldump.sql

    MySQLdump增量备份及完全备份恢复

    在数据库表丢失或损坏的情况下,备份你的数据库是很重要的。如果发生系统崩溃,你肯定想能够将你的表尽可能丢失最少的数据恢复到崩溃发生时的状态。场景:每周日执行一次完全备份,每天下午1点执行MySQLdump增量备份。

    MySQLdump增量备份配置

  • 在my.ini或my.cnf中加入以下配置:

    log-bin=/opt/Data/MySQL-bin

    “log-bin=”后的字符串为日志记载目录,一般建议放在不同于MySQL数据目录的磁盘上。

  • 增量备份命令:

    mysqldump –lock-all-tables –flush-logs –master-data=2 -u root -p test > backup_sunday_1_PM.sql

    注意:

    • 对于InnoDB将–lock-all-tables替换为–single-transaction
    • flush-logs 为结束当前日志,生成新日志文件
    • master-data=2 选项将会在输出SQL中记录下完全备份后新日志文件的名称,例如输出的备份SQL文件中含有:
      CHANGE MASTER TO MASTER_LOG_FILE=’MySQL-bin.000002′, MASTER_LOG_POS=106;
  • 其他MySQLdump增量备份说明

  • 如果MySQLdump加上–delete-master-logs 则清除以前的日志,以释放空间。但是如果服务器配置为镜像的复制主服务器,用MySQLdump –delete-master-logs删掉MySQL二进制日志很危险,因为从服务器可能还没有完全处理该二进制日志的内容。在这种情况下,使用 PURGE MASTER LOGS更为安全。

  • 每日定时使用 MySQLadmin flush-logs来创建新日志,并结束前一日志写入过程。并把前一日志备份,例如上例中开始保存数据目录下的日志文件 MySQL-bin.000002 , …

  • 恢复完全备份

    mysql -u root -p < backup_sunday_1_PM.sql

    恢复增量备份

    mysqlbinlog MySQL-bin.000002 … | mysql -u root -p

    注意:

    • 恢复过程亦会写入日志文件,如果数据量很大,建议先关闭日志功能。

    其他MySQLdump选项

  • --compatible=name

    • 它告诉 MySQLdump,导出的数据将和哪种数据库或哪个旧版本的 MySQL 服务器相兼容。值可以为 ansi、MySQL323、MySQL40、postgresql、oracle、mssql、db2、maxdb、no_key_options、no_tables_options、no_field_options 等,要使用几个值,用逗号将它们隔开。
  • --complete-insert,-c

    • 导出的数据采用包含字段名的完整 INSERT 方式,也就是把所有的值都写在一行。这么做能提高插入效率,但是可能会受到 max_allowed_packet 参数的影响而导致插入失败。因此,需要谨慎使用该参数,至少我不推荐。
  • --default-character-set=charset

    • 指定导出数据时采用何种字符集,如果数据表不是采用默认的 latin1 字符集的话,那么导出时必须指定该选项,否则再次导入数据后将产生乱码问题。
  • --disable-keys

    • 告诉 MySQLdump 在 INSERT 语句的开头和结尾增加 /*!40000 ALTER TABLE table DISABLE KEYS /; 和 /!40000 ALTER TABLE table ENABLE KEYS */; 语句,这能大大提高插入语句的速度,因为它是在插入完所有数据后才重建索引的。该选项只适合 MyISAM 表。
  • --extended-insert = true|false

    • 默认情况下,MySQLdump 开启 --complete-insert 模式,因此不想用它的的话,就使用本选项,设定它的值为 false 即可。
  • --hex-blob

    • 使用十六进制格式导出二进制字符串字段。如果有二进制数据就必须使用本选项。影响到的字段类型有 BINARY、VARBINARY、BLOB。
  • --lock-all-tables,-x

    • 在开始导出之前,提交请求锁定所有数据库中的所有表,以保证数据的一致性。这是一个全局读锁,并且自动关闭 --single-transaction 和 --lock-tables 选项。
  • --lock-tables

    • 它和 --lock-all-tables 类似,不过是锁定当前导出的数据表,而不是一下子锁定全部库下的表。本选项只适用于 MyISAM 表,如果是 Innodb 表可以用 --single-transaction 选项。
  • --no-create-info,-t

    • 只导出数据,而不添加 CREATE TABLE 语句。
  • --no-data,-d

    • 不导出任何数据,只导出数据库表结构。
  • --opt

    • 这只是一个快捷选项,等同于同时添加 --add-drop-tables --add-locking --create-option --disable-keys --extended-insert --lock-tables --quick --set-charset 选项。本选项能让 MySQLdump 很快的导出数据,并且导出的数据能很快导回。该选项默认开启,但可以用 --skip-opt 禁用。注意,如果运行 MySQLdump 没有指定 --quick 或 --opt 选项,则会将整个结果集放在内存中。如果导出大数据库的话可能会出现问题。
  • --quick,-q

    • 该选项在导出大表时很有用,它强制 MySQLdump 从服务器查询取得记录直接输出而不是取得所有记录后将它们缓存到内存中。
  • --routines,-R

    • 导出存储过程以及自定义函数。
  • --single-transaction

    • 该选项在导出数据之前提交一个 BEGIN SQL语句,BEGIN 不会阻塞任何应用程序且能保证导出时数据库的一致性状态。它只适用于事务表,例如 InnoDB 和 BDB。本选项和 --lock-tables 选项是互斥的,因为 LOCK TABLES 会使任何挂起的事务隐含提交。要想导出大表的话,应结合使用 --quick 选项。
  • --triggers

    • 同时导出触发器。该选项默认启用,用 --skip-triggers 禁用它。
  • 转载地址:http://yybfk.baihongyu.com/

    你可能感兴趣的文章
    mabatis 中出现&lt; 以及&gt; 代表什么意思?
    查看>>
    Mac book pro打开docker出现The data couldn’t be read because it is missing
    查看>>
    MAC M1大数据0-1成神篇-25 hadoop高可用搭建
    查看>>
    mac mysql 进程_Mac平台下启动MySQL到完全终止MySQL----终端八步走
    查看>>
    Mac OS 12.0.1 如何安装柯美287打印机驱动,刷卡打印
    查看>>
    MangoDB4.0版本的安装与配置
    查看>>
    Manjaro 24.1 “Xahea” 发布!具有 KDE Plasma 6.1.5、GNOME 46 和最新的内核增强功能
    查看>>
    mapping文件目录生成修改
    查看>>
    MapReduce程序依赖的jar包
    查看>>
    mariadb multi-source replication(mariadb多主复制)
    查看>>
    MariaDB的简单使用
    查看>>
    MaterialForm对tab页进行隐藏
    查看>>
    Member var and Static var.
    查看>>
    memcached高速缓存学习笔记001---memcached介绍和安装以及基本使用
    查看>>
    memcached高速缓存学习笔记003---利用JAVA程序操作memcached crud操作
    查看>>
    Memcached:Node.js 高性能缓存解决方案
    查看>>
    memcache、redis原理对比
    查看>>
    memset初始化高维数组为-1/0
    查看>>
    Metasploit CGI网关接口渗透测试实战
    查看>>
    Metasploit Web服务器渗透测试实战
    查看>>