Sidekiq consomme trop de mémoire

[davidkingham]

Depuis la mise à jour d’hier, je vois constamment cette erreur dans les journaux. Mon serveur dispose de 8 Go de RAM et seulement 60 % sont utilisés. J’ai essayé d’exécuter discourse-setup pour réinitialiser mes paramètres, ce qui m’a donné ceci :

setting db_shared_buffers = 2048MB
setting UNICORN_WORKERS = 4

Journaux :

Message (781 copies signalées)

Sidekiq consomme trop de mémoire (utilisant : 510,87 Mo) pour 'community.naturephotographers.network', redémarrage

Trace

config/unicorn.conf.rb:164:in `check_sidekiq_heartbeat'
config/unicorn.conf.rb:244:in `master_sleep'
/var/www/discourse/vendor/bundle/ruby/3.2.0/gems/unicorn-6.1.0/lib/unicorn/http_server.rb:295:in `join'
/var/www/discourse/vendor/bundle/ruby/3.2.0/gems/unicorn-6.1.0/bin/unicorn:128:in `<top (required)>'
/var/www/discourse/vendor/bundle/ruby/3.2.0/bin/unicorn:25:in `load'
/var/www/discourse/vendor/bundle/ruby/3.2.0/bin/unicorn:25:in `<main>'

Des idées sur ce qui pourrait se passer ici ?

[Don]

Augmenter la mémoire de Sidekiq l’a résolu pour moi.

Sidekiq is consuming too much memory, restarting

Also, if your server has enough total RAM, you can increase the memory allocation for Sidekiq. Place this in the env: section of app.yml: UNICORN_SIDEKIQ_MAX_RSS: 1000 The default maximum is, I believe, 500mb.

[merefield (Robert)]

Si ça peut vous consoler, j’ai ça aussi, assez régulièrement.

Je vais examiner la suggestion de @Don. Je me le demandais ! Maintenant je sais !

[davidkingham]

Cela semble avoir fait l’affaire, merci Don !

[merefield (Robert)]

S’agit-il d’un manque de « marge » ou pensons-nous qu’il s’agit d’une fuite de mémoire d’une sorte ?

Si c’est le cas, cette erreur apparaîtra de toute façon et l’augmentation de la mémoire allouée ne fera que réduire la fréquence des erreurs…

[davidkingham]

Pour information, je n’ai toujours pas vu l’erreur et mon utilisation de la mémoire a augmenté d’environ 400 Mo après avoir modifié ce paramètre.

[Jagster (Jakke Lehtonen)]

Je me demande ceci :

@sam

sur les multisites très fréquentés, vous devez ajuster UNICORN_SIDEKIQ_MAX_RSS

J’obtiens la même erreur (ou devrais-je plutôt la considérer comme informative ?) et le mien n’est ni multisite ni fréquenté.

L’architecture a-t-elle changé au fil du temps et nous rapprochons-nous du vieux sujet avons-nous besoin de plus de mémoire que ce qui est indiqué ?

[Don]

Cet avertissement est apparu dans mes /logs après avoir activé YJIT, mais il est noté que cela augmente l’utilisation de la mémoire. Cependant, je pense que cela peut également se produire sur des sites très fréquentés avec beaucoup d’activité ou des serveurs partagés très fréquentés avec une mémoire partagée, etc.

@tgxworld

Veuillez noter que nous avons choisi de ne pas activer YJIT pour les instances auto-hébergées par défaut en raison de l’augmentation de l’utilisation de la mémoire. Les auto-hébergeurs qui activent YJIT doivent surveiller l’utilisation de la mémoire pour s’assurer que leurs serveurs peuvent gérer les exigences supplémentaires en matière de mémoire.

[merefield (Robert)]

le tableau de bord Sidekiq semble afficher l’utilisation de la mémoire pour Redis, dommage qu’il n’en fasse pas autant pour Sidekiq lui-même ? :

[davidkingham]

Juste une petite mise à jour ici, depuis que j’ai apporté la modification, mon utilisation de la mémoire est passée d’environ 60 % à 80 % (8 Go) et reste stable. Je n’ai pas vu d’autre erreur dans les journaux et certains autres problèmes ont également disparu.

[system (system) A fermé ce sujet ()]

This topic was automatically closed 30 days after the last reply. New replies are no longer allowed.