불행히도 사이트의 콘텐츠가 공개적으로 접근 가능한 경우, LLM 스크레이퍼를 차단하는 확실한 방법은 없습니다. 많은 스크레이퍼가 robots.txt를 무시하고, 심지어 다른 사용자 에이전트와 IP 주소를 사용하여 인간 방문자로 위장하여 차단을 우회하기도 합니다. 많은 사람들이 자신의 콘텐츠가 이런 방식으로 사용되기를 원하지 않는 선택지를 원하고 있는 것으로 보이므로, 법적 규제를 통해 이러한 상황에 대한 안전장치를 마련할 수 있기를 바랍니다.
8개의 좋아요