PostgreSQL定期清理归档(pg_wal)日志

运行了5个月的数据库,突然发现服务器磁盘快满了,一看是归档日志很大,打算写个脚本在不影响数据库运行的情况下定期清理PostgreSQL中的archive日志。

我的postgresql.conf中的归档日志配置(不做配置的话默认归档日志在pg_wal中):

archive_mode = on
archive_command = 'cp %p /home/archive/%f'

1. 清理方法

读取控制文件以确定可以清理的WAL(Write-Ahead Logging)文件范围。可以使用pg_controldata命令来获取这些信息。

pg_controldata $PGDATA

将显示当前可以删除的WAL文件的范围。
下图中表示:000000010000003700000007这个文件之前的文件都可以删除了
在这里插入图片描述
也可以通过pg_archivecleanup清理(前提是没有配置archive_command路径,使用默认路径pg_log
执行如下命令将会清除000000010000003700000007之前的所有日志。

 pg_archivecleanup -d $PGDATA/pg_wal 000000010000003700000007

PS:我自己是直接用下面的脚本清理,很好用!
定时任务:每周5的凌晨2点执行

0 2 * * 5 cd /home/scripts && ./wal_clean.sh >> ./logfile.log 2>&1

2. 定期清理archive日志脚本

#!/bin/bash

# 设置归档目录路径
archive_directory="/home/archive"
TIME="$(date +%Y-%m-%d-%H-%M)"
# 执行pg_controldata命令并提取Latest checkpoint's REDO WAL file的值
result=$(pg_controldata "$PGDATA" | grep "Latest checkpoint's REDO WAL file")
value=$(echo "$result" | awk '{print $6}')

# 输出结果
echo "时间:$TIME"
echo "Latest checkpoint's REDO WAL file: $value"

#查询15天之前的所有日志,判断是否存在未完成归档日志(一般查询1天以后的日志都是不存在的,根据自己需要修改),都可以直接删除
file=`find $archive_directory -type f -name "000*" -mtime +15 |grep $value`
if [ "$file" != "" ]; then
	echo "存在未完成归档的日志,不能删除"
	echo $file
	exit 1
else
	echo "可以清理已完成归档日志操作"
	#清理15天以前的归档日志
	find $archive_directory -type f -name "000*" -mtime +15 -exec rm {
   } \;
fi

相关推荐

  1. oracle 清理归档

    2024-02-21 14:02:03       59 阅读
  2. clickhouse清理

    2024-02-21 14:02:03       56 阅读
  3. [运维|shell] 编写shell脚本定期清理

    2024-02-21 14:02:03       56 阅读
  4. Oracle清理闪回

    2024-02-21 14:02:03       34 阅读
  5. postgresql触发器记录更新

    2024-02-21 14:02:03       55 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-02-21 14:02:03       94 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-02-21 14:02:03       100 阅读
  3. 在Django里面运行非项目文件

    2024-02-21 14:02:03       82 阅读
  4. Python语言-面向对象

    2024-02-21 14:02:03       91 阅读

热门阅读

  1. vim 实用快捷键

    2024-02-21 14:02:03       47 阅读
  2. ConversionService学习

    2024-02-21 14:02:03       48 阅读
  3. blender快捷键记录

    2024-02-21 14:02:03       45 阅读
  4. Axios

    2024-02-21 14:02:03       45 阅读
  5. C# 使用Newtonsoft.Json来读取JOSN数组

    2024-02-21 14:02:03       50 阅读