Тест восстановления — не работает

[Crius]

Привет, это твой любимый любитель багов, пользователь, который беспокоит поддержку.

Сегодня днем я тестировал восстановление, и в двух попытках из двух получил вот это:

ERROR:  could not extend file "base/16384/3294755": wrote only 4096 of 8192 bytes at block 43985
HINT:  Check free disk space.
EXCEPTION: psql failed: HINT:  Check free disk space.
/var/www/discourse/lib/backup_restore/database_restorer.rb:92:in `restore_dump'
/var/www/discourse/lib/backup_restore/database_restorer.rb:26:in `restore'
/var/www/discourse/lib/backup_restore/restorer.rb:51:in `run'
script/discourse:149:in `restore'
/var/www/discourse/vendor/bundle/ruby/3.2.0/gems/thor-1.2.2/lib/thor/command.rb:27:in `run'
/var/www/discourse/vendor/bundle/ruby/3.2.0/gems/thor-1.2.2/lib/thor/invocation.rb:127:in `invoke_command'
/var/www/discourse/vendor/bundle/ruby/3.2.0/gems/thor-1.2.2/lib/thor.rb:392:in `dispatch'
/var/www/discourse/vendor/bundle/ruby/3.2.0/gems/thor-1.2.2/lib/thor/base.rb:485:in `start'
script/discourse:290:in `<top (required)>'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/lib/bundler/cli/exec.rb:58:in `load'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/lib/bundler/cli/exec.rb:58:in `kernel_load'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/lib/bundler/cli/exec.rb:23:in `run'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/lib/bundler/cli.rb:492:in `exec'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/lib/bundler/vendor/thor/lib/thor/command.rb:27:in `run'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/lib/bundler/vendor/thor/lib/thor/invocation.rb:127:in `invoke_command'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/lib/bundler/vendor/thor/lib/thor.rb:392:in `dispatch'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/lib/bundler/cli.rb:34:in `dispatch'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/lib/bundler/vendor/thor/lib/thor/base.rb:485:in `start'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/lib/bundler/cli.rb:28:in `start'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/exe/bundle:45:in `block in <top (required)>'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/lib/bundler/friendly_errors.rb:117:in `with_friendly_errors'
/usr/local/lib/ruby/gems/3.2.0/gems/bundler-2.4.13/exe/bundle:33:in `<top (required)>'
/usr/local/bin/bundle:25:in `load'
/usr/local/bin/bundle:25:in `<main>'
Trying to rollback...
Rolling back...
Cleaning stuff up...
Dropping functions from the discourse_functions schema...
Removing tmp '/var/www/discourse/tmp/restores/default/2023-08-19-145440' directory...
Unpausing sidekiq...
Marking restore as finished...
Notifying 'system' of the end of the restore...
Finished!
[FAILED]
Restore done.

Особое упоминание стоит сделать вот этому:

Finished!
[FAILED]
Restore done.

Это меня немного рассмешило
Я бы сказал, что это действительно плохо: по шкале от «не так уж и плохо» до «невероятно плохо» — это определённо ближе к концу.

Я восстанавливал в тестовой среде (отдельные виртуальные машины, которые мы используем для тестирования и экспериментов), предварительно выполнив чистую установку:

• launcher stop app
• rm -rf /var/discourse/shared
• launcher rebuild app

Восстановление, которое я попробовал, — это последняя копия, созданная автоматическим резервным копированием и сохранённая в S3.

Затем я скачал её по ссылке, присланной на почту, и восстановил согласно этой инструкции:

Restore a backup from the command line

This guide explains how to restore a Discourse backup from the command line without using the Discourse web UI. Required user level: Administrator Console access required Here’s how to restore a Discourse backup from the command line, without ever booting the Discourse web UI. This is handy when you’re moving servers. Prerequisites Before you start, make sure you complete the following steps: Download the latest backup file from the source Disco…

Размер резервной копии составлял 10 ГБ. На виртуальной машине было примерно 110 ГБ свободного места, когда я начал восстановление.

Редактирование: версия Discourse 3.2.0.beta1-dev (fbf7b106cc)

[itsbhanusharma (Bhanu Sharma)]

@Crius

ERROR:  не удалось расширить файл "base/16384/3294755": записано только 4096 из 8192 байт в блоке 43985
HINT:  Проверьте свободное место на диске.
EXCEPTION: psql failed: HINT:  Проверьте свободное место на диске.

У вас закончилось место на диске. Убедитесь, что на этом сервере доступно как минимум в 3 раза больше места, чем размер вашей резервной копии.

[Crius]

Нет. Это «подсказка» в смысле «это распространённая проблема».

Как указано в сообщении прямо над вашим ответом:

Резервная копия занимала 10 ГБ. На виртуальной машине было примерно 110 ГБ свободного места, когда я начал восстановление.

(отредактировано с указанием размера в ГБ для удобства чтения)

[Crius]

При более детальном исследовании выяснилось, что в резервной копии данных что-то не так: либо файл каким-то образом повреждён, либо при обработке (cooking) возникла ошибка.

Я попробую скачать другую резервную копию, чтобы проверить, сохраняется ли проблема во всех файлах резервных копий, и исключить возможность ошибки при загрузке файла.

[Crius]

Более странная ситуация: загрузка той темы и того сообщения у Discourse не вызывает абсолютно никаких проблем. Она загружается и отображается без ошибок.

Я вручную вмешался и отредактировал тот пост. Сейчас запускаю ручное резервное копирование, чтобы проверить снова.