진지한 질문입니다: 왜 AI 크롤러들이 제 서버를 범람하게 놔두어야 합니까? 물론 글에서는 선택이 항상 저에게 있다고 명확히 하고 있지만, 비즈니스 관점에서 보고 AI 스크래핑을 어떻게 다루는지 Reddit를 예로 들면, 여기서 얻을 수 있는 이점은 무엇일까요?
최근에 구글이 사용자 기록에 따라 개인화된 페이지를 만들 예정이라는 소식을 들었습니다. 즉, 웹마스터에게는 클릭이 줄어들고 알파벳(Alphabet)에게는 돈이 더 들어오는 구조입니다. 그렇다면 여기서의 의미는 무엇일까요?
현재 저는 웨이백 머신(Wayback Machine) 같은 검색 엔진과 캐시 인덱서가 제 콘텐츠를 읽고 캐시할 수 있도록 허용하고 있습니다. 하지만 제 커뮤니티가 아무런 혜택을 받지 못하는 상태에서, 제 사용자들의 콘텐츠가 알파벳과 그 동맹들이 수익을 올리는 데만 사용되고 있는 것이 눈에 보일 뿐입니다. 게다가 제 나라의 LGDP(개인정보보호법)나 유럽의 GDPR과 같은 법적 문제도 있습니다.