Por supuesto, también tendrías que desactivar cualquier método OAuth, pero sí, eso podría funcionar bien. Solo ten cuidado de no cerrarte la sesión (por ejemplo, restaurar el sitio) inadvertidamente.
Aunque en ese caso puedes simplemente volver a activar los inicios de sesión desde la consola. ¿Estás planeando esto para meta 
?