Web Crawler User Agentsタブにボットの名称が表示されている場合、そのボットをブロックするためにオプションに入力すべきは、その名称そのものですか、それとも別の名称ですか?
例えば、
MBCrawler/1.0 (https://monitorbacklinks.com/robot)
という場合、ここには何を入力すべきでしょうか?
「MBCrawler/1.0」全体、あるいはそのボットの名称を含む任意の単語でしょうか?
//
2Q
ところで、これらのボットはブロックされているのでしょうか?異なる意見を読みました。もしかすると、ボットを気にする必要はないのかもしれません。
しかし、もしそうなら、なぜデフォルトでAhrefsがブロックされているのでしょうか?この設定の目的は何ですか?
