Back to Question Center
0

Semalt:robots.txt:いくつかのWebページ以外のすべてのWebページをブロックしますか?

1 answers:

私はロボットに関するいくつかの疑問がある. txt. 言って、私のドメインはstackoverflow. com

A)以下のコードはすべてのクローラーに対して以下のことを行いますか?

ユーザーエージェント:*Disallow:/許可:/ $
許可:/ a / $
許可:/ a / login. PHP
許可:/ a / login. PHP?return = / pligg /
  1. 受け入れるhttp:// stackoverflow. com /は受け入れますhttp:// stackoverflow. comも?

  2. 受け入れるhttp:// stackoverflow. com / a /

  3. 受け入れるhttp:// stackoverflow. com / a / login. php

  4. 受け入れるhttp:// stackoverflow. com / a / login. php?return = / pligg /

  5. 他のページを受け付けていないhttp:// stackoverflow. com

B)どちらが正しいか:ロボット. txtまたはロボット. txt

5 days ago
Semalt:robots.txt:いくつかのWebページ以外のすべてのWebページをブロックしますか?
Reply