robots.txt でsaitemap通知

  • 投稿日:
  • by
  • カテゴリ:

検索エンジンにクロールさせインデックスするサイトマップは、
サイトマップの設置するドメインと異なるドメインのURLを記載できません。

しかし、「robots.txt」で、検索エンジンに自動で見てもらう場合は、以下の方法で可能です。


【robots.txt でサイトマップ設置場所を記述する例】:

例として、https://pb-support.com/sitemap.xml に設置し、
https://pb-support.com/ 内のウェブページ情報を記述している場合、
https://pb-support.com/robots.txt で、次のようにサイトパックのURLを記述します。

User-agent: *
Sitemap: https://pb-support.com/sitemap.xml
Disallow: /bin/



※もちろん、同じドメインに設置する場合は、そのまま検索エンジンロボットが自動で見てくれます。