故障分析 | MySQL 数据”丢失”事件之 binlog 解析应用一则

备注:考虑信息敏感性,以下分析场景测试环境模拟,相关数据做以下说明

目前创新互联公司已为超过千家的企业提供了网站建设、域名、虚拟空间、绵阳服务器托管、企业网站设计、雁山网站维护等服务，公司将坚持客户导向、应用为本的策略，正道将秉承"和谐、参与、激情"的文化，与客户和合作伙伴齐心协力一起成长，共同发展。

发现了一些端倪,在mysql-bin.000004中有对该表的2次truncate操作,等等,好像发现了什么,那条丢失的数据也是在这个mysql-bin.000004文件中,梳理下逻辑,难道那条记录在2次truncate之间,于是单独对这个binlog做详细解析,得到以下信息

到此基本了解了这条记录为何会诡异丢失了 ,与客户确认跑批灌数据的逻辑,了解到会对该表做truncate,但由于 误操作 ,在跑批开始后,又触发了一轮truncate行为,导致已经插入到该表的部分数据再次被清理了,也就导致了在解析binlog时部分记录丢失了,但并未观测到有删除的行为,而是被truncate方式清理.

备注 :虽然binlog记录的信息足够多,但当故障原因定位后,由于其并未记录 对该操作的IP及用户 信息,如果不开审计,也只能知道发生了该行为,但无法具体定位触发该行为的"人".

mysql 主从切换 数据丢失怎么办

1. 在有主键或者唯一键的情况下，Slave 重放 Binlog 并不会去比较检索到的记录的每一列是否和BI相同，因此如果 Slave 和 Master 存在数据不一致，会直接覆盖 Slave 的数据而不会报错。

2. 在没有主键或者唯一键的情况下，Hash Scan / Hash Scan Over Index 的执行效率 在理论上分析高于 Table Scan 和Index Scan 。

3. 在没有主键或者唯一键的情况下，Slave 选择的二级索引是第一个所有的列都在 BI 中存在的索引，不一定是 Master 执行计划所选择的索引。

mysql 远程写入 老是丢数据怎么办

具体的解决步骤如下，希望能帮助遇到同样问题的同学们：

找到并修改my.cnf文件。在不同的Linux系统下，my.cnf放在不同的位置。这里以Ubuntu Server做示例，其他系统请根据情况自行找到my.cnf的路径。一般只会存放在/etc/my.cnf或者/etc/mysql/my.cnf下。

首先用vim打开my.cnf：

vim /etc/mysql/my.cnf

看看是否有绑定本地回环地址的配置，如果有，注释掉下面这段文字：（在文字之前加上#号即可）

bind-address = 127.0.0.1

然后找到[mysqld]部分的参数，在配置后面建立一个新行，添加下面这个参数：

skip-name-resolve

保存文件并重启MySQL：

/etc/init.d/mysql restart

这样就会发现，问题已经解决了！远程连接不会丢失了。

补充 mysql连接不原因

1. 首先要排查网络问题和防火墙的问题

这个是必须的， 你要是连MySQL的服务器都连不上， 那还访问什么？ 怎么检查呢？ ping一下

ping 192.168.0.11 ping 的通的话， 再去检查一下 3306端口是不是被防火墙给挡掉了

ping 192.168.0.11:3306 或者干脆把防火墙关掉，service iptables stop (Redhat ) 或 ufw disable(ubuntu)

这一步没问题的话， 开始下一步：

2. 要排查有没有访问权限 说到访问权限， MySQL分配用户的时候会指定一个host, 比如我的 host 指定为 192.168.0.5 , 那么这个账号就只能 5 这一台机器访问， 其他的机器用这个账号访问会提示没有权限。 host 指定为 % 则表示允许所有的机器访问。

一般来说出于安全方面的考虑，遵循最小权限原则， 权限的问题就不多讲了， 不会的自己查手册。 确定了权限没问题的话进行下一步：

3. 要排查MySQL的配置

检查mysql的配置文件， Linux下MySQL的配置文件叫 my.cnf windows下的叫 my.ini,检查这个配置项： –bind-address=IP

MYSQL版本不同导入数据后有的内容丢失了怎么办

：mysql没有删除数据就没有丢，你查找机器里有没有以你的数据库名为文件夹名的文件夹，以表名为文件名的文件，如果有，那就是你的数据库和表，就没丢

mysql8 ibdata文件丢失怎么恢复数据

因为磁盘空间不足，我的一个虚拟机服务器崩溃了。结果数据库服务器进程无法启动，数据也就无法导出。只能想办法从数据库原始文件 ibdata 和 frm 文件中恢复数据库。

因为没有经验，好不容易才找到了恢复方法。特此记录，以备后用。

磁盘空间不足之后，mysqld 进程无法启动，提示“Can't connect to local MySQL server through socket '/var/lib/mysql/mysql.sock' (2)”。这真是让人无比头大，数据库根本连接不上。

目录 Contents

1. 保存原始数据库文件

2. 恢复方法

3. 参考资料：

1. 保存原始数据库文件¶

好在数据库原始文件还在。在我的系统环境和配置情况下，这些文件位于 /var/lib/mysql/ 文件夹下面。假设数据库名是 test，则这些文件表现为：

--mysql

|--test

|--1.frm

|--2.frm

|...

|--mysql

|...

|--ib_logfile0

|--ib_logfile1

|--ibdata1

|...

这些就是原始数据库文件，可以用来恢复数据库。将这些文件额外保存一份，以防万一。

2. 恢复方法¶

我的原始虚拟机完全没有磁盘空间而无法启动数据库服务器进程。虽然试着删除一些不需要的文件，但是数据库却始终无法连接。于是我新建了一个几乎一样的虚拟机（当然磁盘加大了），试图将这些数据库文件导入并恢复数据库。

在经历了很多错误之后，终于找到了正确的方法：

安装完成新服务器之后，通过命令行新建了与原来一样的数据库：数据库名称、用户名、密码都一样。如果有多个数据库需要恢复，就都给建好。（跟配置新服务器一样，参见安装和配置 MYSQL 数据库服务器。）

停止 mysqld 进程

service mysqld stop

将备份的原始数据库文件中的所有 .frm 文件（保持原来的目录结构）和 ibdata1 文件复制到新服务器的数据库文件目录中（如果新服务器操作系统和配置环境一样，那么目录结构也一样），其它文件不要。

使用 -innodb_force_recovery=6参数启动数据库服务器进程，这里是

/etc/init.d/mysqld start -defaults-file=/etc/my.cnf -standalone -console -innodb_force_recovery=6

OK，数据库恢复完成。

mysql数据库表中的内容丢失

一般不会丢失的，先确认是否已经上传，如果。。那么就是人为删除。

当前文章：mysql数据怎么丢失,mysql数据库丢失
新闻来源：http://azwzsj.com/article/dsegooh.html