Questo non sembra essere specifico della modalità RTL, poiché non è presente in modalità provvisoria: sembra essere correlato a una personalizzazione specifica di quel sito (hanno applicato un colore di sfondo personalizzato alla barra laterale).
Possono risolvere il problema nel loro tema, aggiungendo un nuovo stile come questo:
.sidebar-footer-wrapper {
background: var(--sidebar-color);
}