这是我们测试环境遇到的一个问题,详见这篇文章:docker 部署数据库并通过数据卷恢复数据 - https://www.modb.pro/db/109870
然后在网上找到一篇和我们的情况一样:https://www.jianshu.com/p/105855a8a6f7
一、问题背景
公司使用测试数据库使用的docker运行的postgresql, 在创建的时候两个docker启动的连接了统一个目录, 后来发现了这个问题停止了一个,紧接着另一个出现了
而我们的情况是 docker stop 之后,2个容器都没了,然后重新创建容器并使用数据卷去恢复数据,容器一直启不成功。报错也是上面这个报错:
然后也有一篇文章有介绍:https://daoyuan.li/docker-postgres-panic-could-not-locate-a-valid-checkpoint-record/
重新启动时,我的 Postgres 数据库似乎没有正确关闭,当我尝试使用 docker-compose 再次启动它时,以下消息显示在
docker logs
:// logs PANIC: could not locate a valid checkpoint record LOG: startup process (PID 23) was terminated by signal 6: Aborted LOG: aborting startup due to startup process failure LOG: database system is shut down LOG: database system was interrupted; last known up at 2017-09-14 08:22:04 UTC LOG: unexpected pageaddr B/68B26000 in log segment 000000010000000B0000006D, offset 11689984 LOG: invalid primary checkpoint record LOG: unexpected pageaddr B/688F2000 in log segment 000000010000000B0000006D, offset 9379840 LOG: invalid secondary checkpoint record
要解决这个问题,首先关闭这个容器(docker-compose down),然后以交互模式启动容器:
daoyuan.li:~/Projects/magic/stock$ docker run -it -v /Users/daoyuan.li/Projects/magic/postgres_data:/var/lib/postgres/data postgres:9.6 /bin/bash root@c4d2fb7edcea:/# gosu postgres pg_resetxlog -f /var/lib/postgres/data Transaction log reset root@c4d2fb7edcea:/# exit
重置事务日志后,一切都应该没问题。现在你可以再次启动你的容器(docker-compose up -d)
二、解决方案
1、具体原因:
原因是两个容器共用一个/pg/data,导致/pg/data中事务日志有问题
2、为什么会出现2个容器
很有可能就是之前本来通过 docker run 启动了一个容器,挂载的数据卷目录;然后又通过 docker-compose.yml 又启动了一个相同的容器,也是挂载的相同的数据卷目录。
3、如何解决
具体原因结果发现是日志对不上了(2个容器导致数据库日志冲突了), 恢复一下就行了, 于是使用启动了一个容器,运行
# 挂载该数据卷目录并进入到容器
docker run -it -v /root/postgres:/var/lib/postgresql/data postgres /bin/bash gosu postgres pg_resetxlog -f /var/lib/postgres/data
但是结果发现没有这个命令, 然后去postgresql文档一查,pg_resetxlog在11版本中改成了pg_resetwal
跟pg数据库的版本有关,11版本之前用pg_resetxlog,11版本及之后用pg_resetwal,我这里是用pg_resetwal
gosu postgres pg_resetwal -f /var/lib/postgres/data
当时紧接着又找不到目录, 然后才发现目录是postgresql
gosu postgres pg_resetwal -f /var/lib/postgresql/data
这样就搞定了。这里看一下如何查看 pg_resetwal 的位置及使用:
# 查看pg_resetwal在哪个位置
find / -name pg_resetwal
/usr/lib/postgresql/13/bin/pg_resetwal
# 恢复
su - postgres
gosu postgres /usr/lib/postgresql/13/bin/pg_resetwal -f /var/lib/postgresql/data
退出并删除刚才启动的容器,然后重新启动并挂载之前数据卷目录就可以了。