¿Alguna forma de desactivar temporalmente RateLimiter para creación en masa por parte del administrador?

Lo que probablemente haría sería ejecutar un script en la consola de Rails. ¿Has revisado: Available settings for global rate limits and throttling? Parece que puedes modificar esos límites de velocidad.