☰

Скрипт резервного копирования pg_dump и rsync не работает в anacron

tag-icon • tag-icon ubuntu rsync cron postgresql ubuntu-18.04
Скрипт резервного копирования pg_dump и rsync не работает в anacron

У меня есть два скрипта sh, которые называются Z-backup и lb. Z-backup — это скрипт, который я поместил в cron.daily, поэтому он запускается как задание anacron и вызывает скрипт lb. Содержимое скрипта Z-backup следующее:

#!/bin/sh


set -e

# Anacron script to run a daily backup at boot time.

exec /home/chh1/bin/lb >/dev/null 2>&1

exit

Содержание скрипта lb следующее:

#!/bin/sh

# Script to do a backup of PostgreSQL database crewdb and /home folder.
# ~/.pgpass file has been created to support pg_dump -w flag.

# The following if statement removes crewdb.backup.sql if it exists.

if [ -e /home/chh1/Dropbox/postgres_backup/crewdb.backup.sql ]
then
    rm /home/chh1/Dropbox/postgres_backup/crewdb.backup.sql
fi >/dev/null 2>&1


echo "PostgreSQL database crewdb backed up on $(date)" >> /home/chh1  
/logs/postgres_bak_log.txt
pg_dump -h localhost -p 5432 -U postgres -d crewdb -w -C -F p -b -v -f    
~/Dropbox/postgres_backup/crewdb.backup.sql >/dev/null 2>&1

echo "Home folder backed up on $(date)" >> /home/chh1   
/logs/home_bak_log.txt
rsync -acu --delete --exclude-from='/home/chh1/rsync_exclude.txt' /home/    
/media/chh1/f86f92f7-bcb4-4b8e-8a64-8a210606d422/home_backup/ >/dev/null    
2>&1


if [ -e /media/chh1/f86f92f7-bcb4-4b8e-8a64-8a210606d422/home_backup   
/chh1/Dropbox/postgres_backup/crewdb.backup.sql ]
then
    rm /media/chh1/f86f92f7-bcb4-4b8e-8a64-8a210606d422/home_backup  
/chh1/Dropbox/postgres_backup/crewdb.backup.sql
fi >/dev/null 2>&1


pg_dump -h localhost -p 5432 -U postgres -d crewdb -w -C -F p -b -v -f    
/media/chh1/f86f92f7-bcb4-4b8e-8a64-8a210606d422/home_backup/chh1/Dropbox   
/postgres_backup/crewdb.backup.sql >/dev/null 2>&1


exit

Если я просто запускаю lb в терминале, скрипт работает так, как мне нужно. (После запуска lb я запускаю echo $? и получаю код выхода 0). Однако запланированное задание anacron выполняется только частично, и я не могу понять, почему так происходит. Записи журнала создаются, и команда rsync работает, поэтому домашняя папка резервируется через anacron, но не pg_dump. Когда я запускаю команды pg_dump в lb и сохраняю stderr в файл, например:

pg_dump -h localhost -p 5432 -U postgres -d crewdb -w -C -F p -b -v -f    
~/Dropbox/postgres_backup/crewdb.backup.sql 2>/pg_dump_errors.txt

и

pg_dump -h localhost -p 5432 -U postgres -d crewdb -w -C -F p -b -v -f    
/media/chh1/f86f92f7-bcb4-4b8e-8a64-8a210606d422/home_backup/chh1/Dropbox   
/postgres_backup/crewdb.backup.sql 2>/pg_dump_errors.txt

Файл /pg_dump_errors.txt генерирует одинаковый вывод для обеих команд pg_dump и показывает дамп базы данных, но без ошибок, таких как

head pg_dump_errors.txt && tail pg_dump_errors.txt

pg_dump: last built-in OID is 16383
pg_dump: reading extensions
pg_dump: identifying extension members
pg_dump: reading schemas
pg_dump: reading user-defined tables
pg_dump: reading user-defined functions
pg_dump: reading user-defined types
pg_dump: reading procedural languages
pg_dump: reading user-defined aggregate functions
pg_dump: reading user-defined operators
pg_dump: creating FK CONSTRAINT "public.timesheet    
          timesheet_date_linkid_fkey"
pg_dump: creating FK CONSTRAINT "public.timesheet   
          timesheet_employee_functionid_fkey"
pg_dump: creating FK CONSTRAINT "public.timesheet 
          timesheet_employeeid_fkey"
pg_dump: creating FK CONSTRAINT "public.work work_categoryid_fkey"
pg_dump: creating FK CONSTRAINT "public.work work_clientid_fkey"
pg_dump: creating FK CONSTRAINT "public.work work_date_linkid_fkey"
pg_dump: creating FK CONSTRAINT "public.work_expenses  
          work_expenses_date_linkid_fkey"
pg_dump: creating FK CONSTRAINT "public.work_expenses 
          work_expenses_employeeid_fkey"
pg_dump: creating FK CONSTRAINT "public.work_expenses 
          work_expenses_expense_categoryid_fkey"
pg_dump: creating FK CONSTRAINT "public.work_expenses   
          work_expenses_workid_fkey"

Я предполагаю, что anacron (из-за set -e в Z-backup) не выполняется из-за этого, но я не уверен, так как на самом деле я сбросил stderr в /dev/null (в lb). Все остальные команды в lb не генерируют никакого вывода stderr.

Дополнительная информация

-rwxr-xr-x 1 root root 119 Oct 13 13:57 /etc/cron.daily/z-backup
-rwxrwxr-x 1 chh1 chh1 1279 Oct 20 17:26 /home/chh1/bin/lb
-rw------- 1 chh1 chh1 68 Oct 21 06:00 /home/chh1/.pgpass

cat .pgpass
#hostname:port:database:username:password
*:*:crewdb:*:pg#$as(

postgres=# \l List of databases Name | Owner | Encoding | Collate | Ctype | Access privileges
-----------+----------+----------+-------------+-------------+----------------------- crewdb | postgres | UTF8 | en_NZ.UTF-8 | en_NZ.UTF-8 | =Tc/postgres + | | | | | postgres=CTc/postgres+ | | | | | chh1=CTc/postgres postgres | postgres | UTF8 | en_NZ.UTF-8 | en_NZ.UTF-8 | template0 | postgres | UTF8 | en_NZ.UTF-8 | en_NZ.UTF-8 | =c/postgres + | | | | | postgres=CTc/postgres template1 | postgres | UTF8 | en_NZ.UTF-8 | en_NZ.UTF-8 | =c/postgres + | | | | | postgres=CTc/postgres

sudo cat /etc/postgresql/10/main/pg_hba.conf

# Database administrative login by Unix domain socket
local   all             postgres                                md5

# TYPE  DATABASE        USER            ADDRESS                 METHOD

# "local" is for Unix domain socket connections only
local   all             all                                     peer 
# IPv4 local connections:
host    all             all             127.0.0.1/32            md5
# IPv6 local connections:
host    all             all             ::1/128                 md5
# Allow replication connections from localhost, by a user with the
# replication privilege.
local   replication     all                                     peer
host    replication     all             127.0.0.1/32            md5
host    replication     all             ::1/128                 md5

Кто-нибудь знает, почему это не работает? И почему я получаю stderr-вывод от pg_dump, даже когда резервное копирование, кажется, проходит нормально. Я очень ценю любую помощь!

решение1

.pgpassна пользователя. Является ли пользователь Unix, который запускает запланированный скрипт, тем же пользователем, который тестирует скрипт вручную?

И почему я получаю вывод stderr от pg_dump, даже когда резервное копирование, кажется, проходит нормально

Из-за -vопции. Вам следует удалить ее, а также удалить те >/dev/null 2>&1, которые приводят к исчезновению потенциально полезных сообщений об ошибках, в том числе в верхнем вызывающем.

решение2

Ответ — изменить pg_hba.conf на:

sudo grep ^[^#] /etc/postgresql/10/main/pg_hba.conf
[sudo] password for chh1: 
local   all             all                                     trust 
local   all             all                                     trust
host    all             all             127.0.0.1/32            trust
host    all             all             ::1/128                 md5
local   replication     all                                     md5
host    replication     all             127.0.0.1/32            md5
host    replication     all             ::1/128                 md5

Теперь скрипт anacron работает отлично.

Связанный контент