Ich persönlich tue das einfach nicht. Das ist meine persönliche Meinung, aber LLMs war es immer verboten, meine Websites zu besuchen, und das wird es auch immer bleiben. Ich genieße es nicht, meine harte Arbeit – sei es Text oder Code – an Scraper zu verschenken, insbesondere nicht an solche von OpenAI oder Anthropic.
Die meisten meiner Domains enthalten Dateien wie diese:
https://pyxfluff.dev/robots.txt
https://pyxfluff.dev/llms.txt
Natürlich ist das alles nur persönliche Präferenz, aber diese ganze AI-Hysterie wäre vorbei, sobald die Leute aufhören, diesen Unternehmen zu erlauben, den Inhalt ihrer Websites zu stehlen. Vielleicht wird das neueste Google-Update, gegen das sich so viele richten, einigen Website-Betreibern den Kopf zurechtrücken, die dann plötzlich keine Zugriffe mehr auf ihre Seiten haben werden.