WordPress 사이트에서 SSO를 사용 중인데, 크롤러가 어떻게 들어올 수 있을까요? 크롤러 수는 적지만 민감한 정보이기 때문에 크롤러 수가 적더라도 우려가 됩니다. 매일 통합된 페이지뷰의 일반적인 분포는 다음과 같습니다:
로그인된 사용자: 5,000
익명 사용자: 20 (로그인 페이지에 접근하면 이 값이 발생하므로 이는 우려 사항이 아님)
크롤러: 5 (어떻게?)
Smarter handling of random crawler traffic 을 읽었고, 크롤러 감지가 완벽하지 않다는 점을 대략적으로 이해하고 있습니다. 이 점을 걱정해야 할까요?
정당한 로그인 사용자가 스크레이퍼를 실행하고 있다는 것은 상상하기 어렵습니다.
