Alterar as configurações de fonte do nome das categorias na página de categorias

Isso realmente depende do tipo de página de categoria que você escolheu. Por exemplo, para categorias com tópicos, o código será algo assim:

.category-list.with-topics .category-name {
    font-size: 25px;
    font-weight: normal;
    color: gray;
}

Você precisa usar o inspetor do navegador para encontrar a classe CSS (e o elemento pai) que deseja usar. Veja:

O elemento pai serve para indicar que você deseja alterar a aparência do nome da categoria apenas nesta página e não globalmente.

Para alterar o tipo de fonte, consulte Change the default font on your site

Da próxima vez, antes de postar, use a função de pesquisa no canto superior direito e com certeza encontrará as respostas que está procurando.

Já este aqui, CSS Tutorial, é um bom lugar para começar a aprender um pouco de CSS.