IIS クラウド サービス Azure Web サイトのルートにカスタム robots.txt がありますが、 www.oursite.com/robots.txt に移動しても正しく表示されません。次の内容を含む「別の」 robots.txt ファイルが表示されます。
User-agent: LinkChecker
Allow: /
User-agent: *
Disallow: /
私たちは次のことを試しました:
1. ルートの robots.txt ファイルを削除する – 間違った robots.txt ファイルが引き続き表示されます。2
. カスタム robots.txt を表示するために web.config に url-rewrite ルールを追加する – 正しい robots.txt がしばらく表示されますが、その後別の robots.txt に戻ります。
カスタム robots.txt に何が影響しているのかご存知ですか?
答え1
メンテナンスのために IIS 管理ツールを使用している場合、適切な場所で構成していないと、すでに独自の設定が上書きされる可能性があります。
IIS ロボットとサイトマップの拡張機能