当前位置:首页 > 文章列表 > 数据库 > MySQL > mysql文件ibdata1增长过大,导致服务器无法写的问题

mysql文件ibdata1增长过大,导致服务器无法写的问题

来源:SegmentFault 2023-01-25 18:43:48 0浏览 收藏

怎么入门数据库编程?需要学习哪些知识点?这是新手们刚接触编程时常见的问题;下面golang学习网就来给大家整理分享一些知识点,希望能够给初学者一些帮助。本篇文章就来介绍《mysql文件ibdata1增长过大,导致服务器无法写的问题》,涉及到MySQL、Linux、MariaDB,有需要的可以收藏一下

背景

由云上的一个服务返回异常触发的,由于最近服务代码未有改动,之前运行正常,所以首先到服务所在的服务器检查服务的状态:

[root@manager-01 ~]# systemctl status 
Jul 27 17:51:09 manager-01 node[14705]: { Error: ENOSPC: no space left on device, write errno: -28, code: 'ENOSPC', syscall: 'write' }
Jul 27 17:51:11 manager-01 node[14705]: { Error: ENOSPC: no space left on device, write errno: -28, code: 'ENOSPC', syscall: 'write' }
Jul 27 17:51:21 manager-01 node[14705]: { Error: ENOSPC: no space left on device, write errno: -28, code: 'ENOSPC', syscall: 'write' }

可以发现报错信息很明确:空间不足,无法写入
备注:OS版本是:CentOS 7

定位

首先查看下当前服务器空间使用情况:

[root@manager-01 ~]# df -h
Filesystem             Size  Used Avail Use% Mounted on
/dev/vda1               40G   38G     0 100% /
devtmpfs               1.9G     0  1.9G   0% /dev
tmpfs                  1.9G     0  1.9G   0% /dev/shm
tmpfs                  1.9G  384K  1.9G   1% /run
tmpfs                  1.9G     0  1.9G   0% /sys/fs/cgroup
/dev/mapper/vg00-data  100G   33M  100G   1% /data
tmpfs                  380M     0  380M   0% /run/user/1000

发现根目录/已经没有可用空间了
查看下是哪些目录空间用的最多,逐步排查:

[root@manager-01 /]# sudo du -s -h /* | sort -nr
798M    /home
384K    /run
372M    /app
143M    /boot
59M     /etc
40K     /tmp
35G     /var
26M     /root
16K     /lost+found
4.0K    /srv
4.0K    /opt
4.0K    /mnt
4.0K    /media
1.7G    /usr
......

可以发现/var目录使用了35G,占了87.5%的空间,按照上述方法逐步排查,最终发现:

[root@manager-01 mysql]# du -s -h ./* | sort -nr
1004K   ./mysql
212K    ./performance_schema
92K     ./Alerts_DB
28G     ./ibdata1
16K     ./aria_log.00000001
5.0M    ./ib_logfile1
5.0M    ./ib_logfile0
4.0K    ./test
4.0K    ./aria_log_control
0       ./mysql.sock

在/var/lib/mysql目录下发现一个超大文件ibdata1,一个文件28G
百度下这个文件是何许内容:ibdata1文件是InnoDB存储引擎的共享表空间文件
该文件中主要存储着下面这些数据:

  • data dictionary
  • double write buffer
  • insert buffer/change buffer
  • rollback segments
  • undo space
  • Foreign key constraint system tables

参考链接:
https://mp.weixin.qq.com/s/KD2qLrmWY80yFxUtxJVNMA

解决方案

既然定位出是mysql的共享表空间文件增大导致的系统空间被耗完,那么就寻找解决方案吧,摸索过程都是百度各种解决方案,然后再虚机模拟操作,这里直接给出解决方法:

1、修改共享表空间为各表独立空间

这个方案网上有许多案例,这里给出自己的操作过程,供参考
数据库版本:

[t3mgr@manager-01 ~]$ mysql --version
mysql  Ver 15.1 Distrib 5.5.65-MariaDB, for Linux (x86_64) using readline 5.1

我这里用的是mariadb 5.5.65版本

  • 停止自己的业务,防止过程中有数据操作(我这是服务基本不可用了,所以没有影响,此处操作请根据自己实际情况判断)

systemctl stop 
  • 备份数据库(全库)

[root@manager /]# mysqldump -uroot -p --all-databases --add-drop-table > /data/db_backup.sql

为参数,实际操作请输入对应的密码
/data/db_backup.sql为备份的文件名,根据实际情况找个足够大的空间放置(大于原有mysql目录占用的空间肯定就足够了)
如果备份内容较大,可能会花费一定时间,要耐心等待...

  • 修改mysql(mariadb)配置

配置文件一般为/etc/my.cnf
在[mysqld]下增加下面配置
innodb_file_per_table=1

  • 验证修改是否生效

先将mysql(mariadb)启动

[root@manager /]# systemctl restart mariadb

然后进入mysql视图执行查看变量的命令:show variables like '%per_table%';

#mysql -uroot -p
mysql> show variables like '%per_table%';
+-----------------------+-------+
| Variable_name         | Value |
+-----------------------+-------+
| innodb_file_per_table | ON    |
+-----------------------+-------+
1 row in set (0.00 sec)

如果对应的值为ON,则表示修改成功。

  • 删除原来的数据库文件

在/var/lib/mysql目录下执行如下命令

[root@manager-01 mysql]# rm -rf ibdata1
[root@manager-01 mysql]# rm -rf ib_logfile*
[root@manager-01 mysql]# rm -rf 

为自己的数据库名称

  • 还原数据库

[root@daik-manager /]# mysql -uroot -p

数据库较大时,这个步骤也会耗时,请等待...
经过以上几步后,可以看到新的ibdata1文件就只有几十M了,数据及索引都变成了针对单个表的小ibd文件了,它们在相应数据库的文件夹下面

尴尬的是,操作了这么半天,再查看下空间情况,腾挪出了3G空间,还是杯水车薪啊,没办法,继续想辙

2、将数据库挪到其他位置

这个方法主要是将mysql挪到别的有空间的目录,可以根据自己的实际情况,看哪个目录的挂载空间够大,就挪到哪去,这主要还是由于服务部署太随意,没有将mysql规划好,导致空间不足。

  • 停止服务,同上
  • 停止数据库,将mysql目录整体搬迁

[root@manager-01 mysql]#mv /var/lib/mysql  /data

或者用如下方法迁移

rsync -avz   /var/lib/mysql /data/  

rsync 免除迁移目标目录的目录属主及权限等操作

  • 修改配置文件/etc/my.cnf

[mysqld]
innodb_file_per_table=1
#datadir=/var/lib/mysql
#socket=/var/lib/mysql/mysql.sock
datadir=/data/mysql
socket=/data/mysql/mysql.sock
  • 创建软连接

[root@manager-01 mysql]#ln -s /data/mysql  /var/lib/mysql 
  • 给目录赋予权限

[root@manager-01 mysql]#chown -R mysql.mysql /home/mysql/

数据库搬迁后,如果用户组和用户名都是mysql,则不用执行此步骤也可以。

  • 重启数据库

[root@manager-01 mysql]#systemctl restart mariadb

至此,才将数据库成功搬迁位置,给系统目录腾出空间:

[root@manager-01 ~]# df -h
Filesystem             Size  Used Avail Use% Mounted on
/dev/vda1               40G  8.9G   29G  24% /
devtmpfs               1.9G     0  1.9G   0% /dev
tmpfs                  1.9G     0  1.9G   0% /dev/shm
tmpfs                  1.9G  384K  1.9G   1% /run
tmpfs                  1.9G     0  1.9G   0% /sys/fs/cgroup
/dev/mapper/vg00-data  100G   42G   59G  42% /data
tmpfs                  380M     0  380M   0% /run/user/1000

本篇关于《mysql文件ibdata1增长过大,导致服务器无法写的问题》的介绍就到此结束啦,但是学无止境,想要了解学习更多关于数据库的相关知识,请关注golang学习网公众号!

版本声明
本文转载于:SegmentFault 如有侵犯,请联系study_golang@163.com删除
吃透了这一套2020阿里,美团,字节跳动Java 面试真题,你离 BAT还远吗?吃透了这一套2020阿里,美团,字节跳动Java 面试真题,你离 BAT还远吗?
上一篇
吃透了这一套2020阿里,美团,字节跳动Java 面试真题,你离 BAT还远吗?
v2ex热帖:面了几个程序员(3-5年),发现他们对MySQL的distinct关键字有误解...
下一篇
v2ex热帖:面了几个程序员(3-5年),发现他们对MySQL的distinct关键字有误解...
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    542次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    508次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    497次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    484次学习
查看更多
AI推荐
  • 笔灵AI生成答辩PPT:高效制作学术与职场PPT的利器
    笔灵AI生成答辩PPT
    探索笔灵AI生成答辩PPT的强大功能,快速制作高质量答辩PPT。精准内容提取、多样模板匹配、数据可视化、配套自述稿生成,让您的学术和职场展示更加专业与高效。
    15次使用
  • 知网AIGC检测服务系统:精准识别学术文本中的AI生成内容
    知网AIGC检测服务系统
    知网AIGC检测服务系统,专注于检测学术文本中的疑似AI生成内容。依托知网海量高质量文献资源,结合先进的“知识增强AIGC检测技术”,系统能够从语言模式和语义逻辑两方面精准识别AI生成内容,适用于学术研究、教育和企业领域,确保文本的真实性和原创性。
    24次使用
  • AIGC检测服务:AIbiye助力确保论文原创性
    AIGC检测-Aibiye
    AIbiye官网推出的AIGC检测服务,专注于检测ChatGPT、Gemini、Claude等AIGC工具生成的文本,帮助用户确保论文的原创性和学术规范。支持txt和doc(x)格式,检测范围为论文正文,提供高准确性和便捷的用户体验。
    30次使用
  • 易笔AI论文平台:快速生成高质量学术论文的利器
    易笔AI论文
    易笔AI论文平台提供自动写作、格式校对、查重检测等功能,支持多种学术领域的论文生成。价格优惠,界面友好,操作简便,适用于学术研究者、学生及论文辅导机构。
    42次使用
  • 笔启AI论文写作平台:多类型论文生成与多语言支持
    笔启AI论文写作平台
    笔启AI论文写作平台提供多类型论文生成服务,支持多语言写作,满足学术研究者、学生和职场人士的需求。平台采用AI 4.0版本,确保论文质量和原创性,并提供查重保障和隐私保护。
    35次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码