어딘가에 관련 설정이 있을 것 같은데 찾을 수가 없네요.
기존 포럼에서 Discourse로의 리다이렉트를 아직 구현하고 있습니다. 중복 콘텐츠 문제를 피하기 위해 Google의 크롤링을 일시적으로 차단하는 방법이 있을까요?
관리자/설정/로그인에서 사이트를 "로그인 필요"으로 설정하고 로그인 필요 옵션을 선택할 수 있습니다.
크롤러도 차단되나요?
네, 크롤러가 “볼” 수 있는 것은 홈페이지뿐이며 그 이상은 아닙니다. 저희 사이트는 로그인 필수인 초대 전용의 비공개 사이트입니다. 가끔 홈페이지에 접근 기록이 남을 수는 있지만, 크롤러가 사이트를 탐색할 수 없기 때문에 다른 페이지는 인덱싱되지 않습니다.