perf(pcmirror-serveur) : un balayage par heure, et il cède le processeur #19

Merged

foXaCe merged 1 commit from perf/balayage-du-miroir into main 2026-10-17 19:28:35 +02:00

Conversation 2 Commits 1 Files changed 1 +11

foXaCe commented 2026-10-17 19:21:51 +02:00

Owner

• Copy link
• Copy Markdown

Le balayage parcourt le miroir entier — 3,3 M de fichiers, 328 000 dossiers — en cent vingt-huit secondes. Toutes les quinze minutes, cela faisait 15 % d un cœur en permanence, mesuré sur le service en marche (68 s de processeur pour 7 min de vie).

Deux corrections dans l unité :

• **** : une passe par heure suffit pour un miroir qui se synchronise à l heure — et elle tombe en décalage naturel avec la synchro, qui part à l heure ronde. Le processeur passe de ~15 % à ~3 % d un cœur.
• ** + ** : un tableau d état ne dispute ni le processeur ni le disque au rsync. C est exactement ce que portait l ancien service Python.

Ce n était pas une fuite de mémoire. La mémoire réelle du processus est de 0 Mo ; les 2 Go du pic sont du cache de pages et de dentries, récupérable, que le noyau attribue au cgroup parce qu il parcourt le miroir — et qui redescend tout seul (38 Mo au repos).

Vérifié : appliqué sur le 108, , , balayage horaire, service reparti et page servie.

Le balayage parcourt le miroir entier — **3,3 M de fichiers, 328 000 dossiers** — en **cent vingt-huit secondes**. Toutes les quinze minutes, cela faisait **15 % d un cœur en permanence**, mesuré sur le service en marche (68 s de processeur pour 7 min de vie). Deux corrections dans l unité : - **** : une passe par heure suffit pour un miroir qui se synchronise à l heure — et elle tombe en décalage naturel avec la synchro, qui part à l heure ronde. Le processeur passe de ~15 % à ~3 % d un cœur. - ** + ** : un tableau d état ne dispute ni le processeur ni le disque au rsync. C est exactement ce que portait l ancien service Python. **Ce n était pas une fuite de mémoire.** La mémoire réelle du processus est de **0 Mo** ; les 2 Go du pic sont du cache de pages et de dentries, récupérable, que le noyau attribue au cgroup parce qu il parcourt le miroir — et qui redescend tout seul (38 Mo au repos). Vérifié : appliqué sur le 108, , , balayage horaire, service reparti et page servie.

foXaCe added 1 commit 2026-10-17 19:21:51 +02:00

perf(pcmirror-serveur) : un balayage par heure, et il cede le processeur ... dae8d5899f

Le balayage parcourt le miroir entier — 3,3 M de fichiers, 328 000 dossiers — en
cent vingt-huit secondes. Toutes les quinze minutes, cela faisait 15 % d'un cœur
en permanence, pour un miroir qui se synchronise à l'heure : une passe par heure
suffit, et elle tombe en décalage naturel avec la synchro, qui part à l'heure
ronde.

Le service porte aussi Nice=10 et IOSchedulingClass=idle, comme l'ancien service
Python : un tableau d'état ne dispute ni le processeur ni le disque au rsync.

Ce n'était pas une fuite de mémoire : la mémoire réelle du processus est de
0 Mo, les 2 Go du pic sont du cache de pages et de dentries, récupérable, que le
noyau attribue au cgroup parce qu'il parcourt le miroir.

hermes-fusion added the

ci-rouge

label 2026-10-17 19:25:01 +02:00

hermes-fusion commented 2026-10-17 19:25:01 +02:00

Collaborator

• Copy link
• Copy Markdown

fusion-auto : pas de fusion, la CI est rouge (Crate pcmirror). Le chef de l'atelier renvoie la carte à l'agent ; l'étiquette tombera d'elle-même une fois corrigé.

`fusion-auto` : pas de fusion, la CI est rouge (Crate pcmirror). Le chef de l'atelier renvoie la carte à l'agent ; l'étiquette tombera d'elle-même une fois corrigé.

hermes-fusion added the

conflit

label 2026-10-17 19:25:01 +02:00

hermes-fusion commented 2026-10-17 19:25:01 +02:00

Collaborator

• Copy link
• Copy Markdown

fusion-auto : pas de fusion, la PR est en conflit avec main : à rebaser. Le chef de l'atelier renvoie la carte à l'agent ; l'étiquette tombera d'elle-même une fois corrigé.

`fusion-auto` : pas de fusion, la PR est en conflit avec main : à rebaser. Le chef de l'atelier renvoie la carte à l'agent ; l'étiquette tombera d'elle-même une fois corrigé.

hermes-bot force-pushed perf/balayage-du-miroir from dae8d5899f to 52b88e5617 2026-10-17 19:25:54 +02:00 Compare

hermes-bot added 1 commit 2026-10-17 19:26:13 +02:00

perf(pcmirror-serveur) : un balayage par heure, et il cede le processeur ... 2ede127248

Le balayage parcourt le miroir entier — 3,3 M de fichiers, 328 000 dossiers — en
une a deux minutes selon la fraicheur du cache. Toutes les quinze minutes, cela
faisait 15 % d'un coeur en permanence, pour un miroir qui se synchronise a
l'heure : une passe par heure suffit, et elle tombe en decalage naturel avec la
synchro, qui part a l'heure ronde.

Le service porte aussi Nice=10 et IOSchedulingClass=idle, comme l'ancien service
Python : un tableau d'etat ne dispute ni le processeur ni le disque au rsync.

Ce n'etait pas une fuite de memoire : la memoire reelle du processus est de 0 Mo,
les 2 Go du pic sont du cache de pages et de dentries, recuperable, que le noyau
attribue au cgroup parce qu'il parcourt le miroir.

foXaCe merged commit 54f39d5e0a into main 2026-10-17 19:28:35 +02:00

foXaCe referenced this pull request from a commit 2026-10-17 19:28:37 +02:00

Merge pull request 'perf(pcmirror-serveur) : un balayage par heure, et il cède le processeur' (#19) from perf/balayage-du-miroir into main

foXaCe referenced this pull request 2026-10-17 19:36:06 +02:00

perf(pcmirror-serveur) : borner le cache du balayage #22

Sign in to join this conversation.

Reviewers

No reviewers

Labels

Clear labels   

ci-rouge

  

conflit

  

operateur

  

relu

No labels

ci-rouge

conflit

operateur

relu

Milestone

Clear milestone

No items

No milestone

Projects

Clear projects

No items

No project

Assignees

Clear assignees

No assignees

3 participants

Notifications

Subscribe

Due date

The due date is invalid or out of range. Please use the format "yyyy-mm-dd".

No due date set.

Dependencies

No dependencies set

Reference

foXaCe/pc-mirror!19

No description provided.