솔직히 이해가 되지 않습니다. 개인적인 의견이지만, LLM이 제 웹사이트를 방문하는 것은 항상 금지되어 왔으며 앞으로도 그럴 것입니다. 텍스트든 코드가든 제 노력의 결실을 스크레이퍼, 특히 OpenAI나 Anthropic 같은 회사에 공짜로 제공하는 것을 좋아하지 않습니다.
제 도메인의 대부분에는 다음과 같은 파일들이 있습니다:
https://pyxfluff.dev/robots.txt
https://pyxfluff.dev/llms.txt
물론 이것은 모두 개인적인 취향의 문제이지만, 사람들이 이러한 회사들이 웹사이트 콘텐츠를 도둟아 가는 것을 허용하는 것을 멈추는 순간, 이 AI 광풍은 끝날 것입니다. 아마도 사람들이 강하게 반대하는 최신 구글 업데이트가 이제 더 이상 웹사이트에 트래픽이 없게 될 웹사이트 소유주들에게 일깨움을 줄지도 모릅니다.