Hai modificato gli user agent dei crawler nella whitelist o gli user agent dei crawler nella blacklist?
Potresti anche voler consultare:
https://meta.discourse.org/t/why-isnt-google-indexing-discourse-seo-concerns/218098
Ci sono molte cose utili lì.