@pfaffman абсолютно прав,
перейдите в Администрирование > Настроить
выберите свою тему, затем «Редактировать CSS/HTML»
и добавьте что-то вроде:
.sidebar-section-header-button {
display: none;
}
сохраните изменения и обновите страницу — значок карандаша должен исчезнуть 