减少mysql中ibdata大小的最佳方法是什么?


63

我有一些生产服务器,其ibdata文件大小每天都在增加。

它已经消耗了290GB的空间。

服务器中的表主要是InnoDB,并且有大量的读写请求。

日志文件的大小也在增加。表中有大量数据。

如何控制两者的增长规模?

我没有使用innodb_file_per_table

Answers:


104

请记住,InnoDB基础结构中最繁忙的文件是/ var / lib / mysql / ibdata1

该文件通常包含许多类的信息(当innodb_file_per_table为0时)

  • 表数据
  • 表索引
  • MVCC(多版本并发控制)数据
    • 回滚段
    • 撤消表空间
  • 表元数据
  • 请参阅图片表示

许多人创建了多个ibdata文件,希望获得更好的磁盘空间管理和性能。它没有帮助。

不幸的是,针对存储在ibdata1中的InnoDB表的OPTIMIZE TABLE有两件事:

  • 使表的数据和索引在ibdata1内部连续
  • 它使ibdata1增大,因为连续数据已附加到ibdata1

您可以从ibdata1中分离表数据和表索引,并使用innodb_file_per_table独立管理它们。要一劳永逸地收缩ibdata1,您必须执行以下操作

步骤01) MySQL将所有数据库转储到SQL文本文件中(称为SQLData.sql)(此处有更多详细信息

步骤02)卸下所有的数据库(除了mysqlperformance_schemainformation_schema

步骤03)关闭mysql

步骤04)将以下行添加到/etc/my.cnf

[mysqld]
innodb_file_per_table
innodb_flush_method=O_DIRECT
innodb_log_file_size=1G
innodb_buffer_pool_size=4G

旁注:无论您为innodb_buffer_pool_size设置什么,请确保innodb_log_file_size为innodb_buffer_pool_size的25%。

步骤05)删除ibdata1,ib_logfile0和ib_logfile1

此时,/ var / lib / mysql中应该只有mysql模式

步骤06)重新启动mysql

这将重新创建10MB的ibdata1,每个1G的ib_logfile0和ib_logfile1

步骤07)将 SQLData.sql重新加载到mysql中

ibdata1将增长,但仅包含表元数据

每个InnoDB表都将存在于ibdata1之外

假设您有一个名为mydb.mytable的InnoDB表。如果进入/ var / lib / mysql / mydb,您将看到代表该表的两个文件

  • mytable.frm(存储引擎头)
  • mytable.ibd(mydb.mytable的表数据和表索引的主页)

ibdata1将永远不再包含InnoDB数据和索引。

使用/etc/my.cnf中的innodb_file_per_table选项,可以运行OPTIMIZE TABLE mydb.mytable,该文件/var/lib/mysql/mydb/mytable.ibd实际上会收缩。

作为MySQL DBA,我在职业生涯中做了很多次

实际上,我第一次这样做是将50GB的ibdata1文件折叠为500MB。

试试看。如果您对此还有其他疑问,请给我发送电子邮件。相信我。这将在短期和长期内发挥作用。!!!

如果您想查看MyISAM和InnoDB中存储了多少实际数据,请运行以下查询:

SELECT IFNULL(B.engine,'Total') "Storage Engine",
CONCAT(LPAD(REPLACE(FORMAT(B.DSize/POWER(1024,pw),3),',',''),17,' '),' ',
SUBSTR(' KMGTP',pw+1,1),'B') "Data Size", CONCAT(LPAD(REPLACE(
FORMAT(B.ISize/POWER(1024,pw),3),',',''),17,' '),' ',
SUBSTR(' KMGTP',pw+1,1),'B') "Index Size", CONCAT(LPAD(REPLACE(
FORMAT(B.TSize/POWER(1024,pw),3),',',''),17,' '),' ',
SUBSTR(' KMGTP',pw+1,1),'B') "Table Size"
FROM (SELECT engine,SUM(data_length) DSize,SUM(index_length) ISize,
SUM(data_length+index_length) TSize FROM information_schema.tables
WHERE table_schema NOT IN ('mysql','information_schema','performance_schema')
AND engine IS NOT NULL GROUP BY engine WITH ROLLUP) B,
(SELECT 3 pw) A ORDER BY TSize;

即使使用my.cnf的建议设置(我已经拥有),删除ib_logfile0和1,然后启动mysql,也会创建新文件,并且在几秒钟内它们就会增长到与上述查询所显示的数据库大小相等的大小。不知道mysql是否将所有表和索引复制到这些文件,同时还将每个表都保存在单独的文件中。
艾伦·金
By using our site, you acknowledge that you have read and understand our Cookie Policy and Privacy Policy.
Licensed under cc by-sa 3.0 with attribution required.