Temo que esto no es un error y funciona según lo previsto. Crear un tema no listado lo elimina de las listas de temas y de búsqueda, pero seguirá enviando una notificación a cualquier persona que esté siguiendo o siguiendo la primera publicación de la categoría (o etiqueta).
Creo que el consejo para crear un tema que no quieras que la gente vea de antemano es usar una categoría controlada por permisos (por ejemplo, personal) y recategorizarlo manualmente cuando esté listo, o programar la publicación desde el temporizador del tema. También puedes usar la función de borrador compartido.
Aunque este problema surge con bastante regularidad, podría valer la pena recopilarlo en un tema de Contribute > Feature.