Pergunta genuína: por que eu deveria deixar que os crawlers de IA inundem meu servidor? Claro que o artigo deixa claro que a escolha sempre será minha, mas, partindo da perspectiva comercial da coisa e usando o Reddit como exemplo de como eles lidam com scraping de IA, quais seriam os benefícios aqui?
Recentemente vi que o Google vai criar páginas personalizadas de acordo com o histórico de seus usuários, ou seja, menos cliques para os webmasters e mais dinheiro para a Alphabet. Então, de novo, qual é o ponto aqui?
Atualmente, eu permito que buscadores e indexadores de cache, como o Wayback Machine, leiam e façam o cache do meu conteúdo, embora eu não consiga visualizar nada senão o fornecimento do conteúdo dos meus usuários para que a Alphabet e companhia monetizem em cima sem que minha comunidade se beneficie de nada, fora que há questões legais como no meu país é o LGDP ou na Europa o GDPR.