Eu recomendo que você use um dos scripts de importação existentes e o modifique para suas necessidades. Será de 10 a 100 ordens de magnitude mais rápido. Eu escrevi vários importadores antes de aprender Ruby.
Você pode descobrir os limites de taxa aqui: discourse/config/discourse_defaults.conf at 1f34f653bfb6ccb39a4f4f8085b07e9d94389e6f · discourse/discourse · GitHub e aqui: Available settings for global rate limits and throttling