# Резкий скачок использования диска во время резервного копирования, Discourse упал :-(

**URL:** <https://meta.discourse.org/t/disk-usage-spike-during-backup-discourse-crashed-hard/157675>\
**Category:** Self-hosting\
**Tags:** server-resources\
**Created:** [14.Июль.2020 06:50:36 UTC](https://meta.discourse.org/t/disk-usage-spike-during-backup-discourse-crashed-hard/157675 "2020-07-14T06:50:36Z")\
**Posts on this page:** 1\
**Showing post:** 13

<div class="post-metadata">

**Author:** ![DBHacker](https://sea3.discourse-cdn.com/meta/user_avatar/meta.discourse.org/dbhacker/32/173072_2.png) [@DBHacker](https://meta.discourse.org/u/DBHacker)\
**Post date:** [14.Июль.2020 13:52:20 UTC](https://meta.discourse.org/t/disk-usage-spike-during-backup-discourse-crashed-hard/157675/13 "2020-07-14T13:52:20Z")

</div>

Не хочу портить праздник, но, судя по прочтению постов, нет никаких твёрдых подтверждений того, что проблема вызвана процессом резервного копирования Discourse.

Почему бы не подтвердить на 100%, что проблема именно в ежедневном процессе резервного копирования? На хостах выполняется более одного процесса из ежедневных crontab-файлов.

Выполнял ли @pnoeric команду `du` на файловой системе `/var/discourse` (вне контейнера)?

В своих заметках @pnoeric пишет:

```plaintext
root@x-app:/var/www/discourse# du -h -d 1

```

Но это полностью пропустило общую директорию Discourse, включая все резервные копии и загрузки! Также это не учитывает все файлы Docker (и образы) на хосте (которые могут значительно увеличиваться, если образы не удаляются со временем).

Эту проверку нужно выполнять вне контейнера (не внутри контейнера!):

Например (вне контейнера):

```plaintext
cd /var/discourse 
/var/discourse# du -sh *
4.0K	bin
4.0K	cids
56K	containers
12K	discourse-doctor
24K	discourse-setup
164K	image
24K	launcher
4.0K	LICENSE
12K	README.md
24K	samples
8.0K	scripts
62G	shared
148K	templates

```

Как видно на этом хосте, общая директория занимает **62 ГБ**.

А также из директории `/var` файловой системы (вне контейнера):

```plaintext
cd /var
# du -sh *
511M	cache
20K	composetest
62G	discourse
1.6G	docker
8.0K	legacy
52G	lib
4.0K	local
0	lock
4.0K	locks
5.7G	log
24K	logs
64K	mail
4.0K	opt
4.0K	registry
4.0K	shared
1.9M	spool
48K	tmp
25G linux_app
2.2G	www

```

Я не хочу портить праздник, но прежде чем предлагать множество «исправлений» для Discourse, было бы очень хорошо на 100% убедиться, что именно cron-процесс резервного копирования Discourse является реальной проблемой.

У нас не было никаких проблем с текущим процессом резервного копирования Discourse, и кроме того, управление файловой системой на хосте — это не задача самого Discourse.

Вот:

```plaintext
du

Filesystem 1K-blocks Used Available Use% Mounted on
udev 32892500 0 32892500 0% /dev
tmpfs 6584232 2136 6582096 1% /run
/dev/md2 470927632 215969956 230966124 49% /
tmpfs 32921160 0 32921160 0% /dev/shm
tmpfs 5120 0 5120 0% /run/lock
tmpfs 32921160 0 32921160 0% /sys/fs/cgroup
/dev/md0 482922 75082 382906 17% /boot
/dev/sda1 244988 4636 240353 2% /boot/efi
tmpfs 6584232 0 6584232 0% /run/user/1000
overlay 470927632 215969956 230966124 49% /var/lib/docker/overlay2/0f8be368b0154285423630ad50148ee2d5fdcb357c46125eafa7374ca34ef29a/merged
shm 524288 1620 522668 1% /var/lib/docker/containers/ca7b55fc5a0c123f7b2b1234ea210aa8286a34167cba9344b7929547bd323c9b/mounts/shm
overlay 470927632 215969956 230966124 49% /var/lib/docker/overlay2/7cd7e8b5b35b496eaed68753cc995e9303499a24721062055e2f06beb07e26c8/merged
shm 65536 0 65536 0% /var/lib/docker/containers/3cc0c90c3e3a5db6692e7b5d21727fbb1c13c8e07e48e4f6d954214fc03694a9/mounts/shm
overlay 470927632 215969956 230966124 49% /var/lib/docker/overlay2/31533fdf68033eed96dab4f9df89025ea3dab172ed48b6ce6431840a8df1c8ea/merged
shm 524288 0 522668 0% /var/lib/docker/containers/631fbabedda9a430dd8204ec66fb45c7514d948025124171b960ea424e28d5d4/mounts/shm
overlay 470927632 215969956 230966124 49% /var/lib/docker/overlay2/7a3ba2223ee93bc868b52b3707799d0fd7b4ca6dcc0df29f20c2c98a53903ff1/merged
shm 65536 0 65536 0% /var/lib/docker/containers/7a145366268c8ac5543a4555dc1bfc63c1e85a654e4c793e96fc2cc2e8514388/mounts/shm
overlay 470927632 215969956 230966124 49% /var/lib/docker/overlay2/add4bdd7bd88df7a0e05dff21896d3ef796f7cf2ff9759e0bb04b1953f16cd95/merged
shm 65536 0 65536 0% /var/lib/docker/containers/123743e122089b94660a6bdd2a9e55055ad91b6f75cce4ac760f36066bcf14d0/mounts/shm
overlay 470927632 215969956 230966124 49% /var/lib/docker/overlay2/b376ff32eaac0c58463e8b99b6db9ec0da3405c3f7a9f00b5430f10e07d372b0/merged
shm 524288 0 524288 0% /var/lib/docker/containers/63c52bc571b5f0d2544417da10efc37d3957e7a38f44bc8325145e795ee29559/mounts/shm

```

Давайте посмотрим на файлы Docker:

```plaintext
# cd /var/lib
# du -sh docker
30G	docker

```

Наши образы Docker регулярно удаляются и очищаются.

@bartv правильно предложил начать с этого:

> Я бы начал с определения, какая именно директория разрастается. Мой стандартный подход — зайти в /var/discourse и выполнить `du -h -d 1`. Затем войти в самую большую директорию и повторять процесс, пока не найдёте подозреваемого. Как только вы его найдёте, это может дать подсказку о том, что происходит.

Это хорошее начало, но на файловой системе хоста может быть много других мест, которые могут заполнить её, включая Docker, файлы ядра и т. д.

График, показывающий резкий скачок процентов раз в день, недостаточно, чтобы с уверенностью утверждать, что cron-процесс резервного копирования Discourse является корневой причиной. Возможно, это так, но, судя по имеющимся данным, это может быть и не так!

---

_[View the full topic](https://meta.discourse.org/t/disk-usage-spike-during-backup-discourse-crashed-hard/157675)._
