Изменить настройки шрифта названий категорий на странице категорий

Это действительно зависит от того, какой тип страницы категории вы выбрали. Например, для категорий с темами код будет выглядеть примерно так:

.category-list.with-topics .category-name {
    font-size: 25px;
    font-weight: normal;
    color: gray;
}

Вам нужно использовать инспектор браузера, чтобы найти нужный CSS-класс (и родительский элемент), который вы хотите использовать. См.

Родительский элемент служит для указания того, что вы хотите изменить внешний вид названия категории только на этой странице, а не глобально.

Чтобы изменить тип шрифта, см. Change the default font on your site

В следующий раз перед публикацией используйте функцию поиска в правом верхнем углу — вы наверняка найдёте ответы, которые ищете.

А вот этот ресурс, CSS Tutorial, — отличное место для начала изучения CSS.