巡回の拒否設定

オールクーポンジャパンの巡回を拒否する場合は、「robots.txt」という名前でテキストファイルを用意し、下記の内容を記述してください。ファイルは、サイトのルートディレクトリに設置をお願いいたします。

例)すべての検索エンジンのクローラーの巡回を拒否する場合

User-agent: *
Disallow: /

「User-agent: *」は、「すべてのクローラー」という意味になります。 特定のディレクトリ内のみの巡回を拒否したい場合は、「Disallow: /」に続いてそのディレクトリ名を指定します。

例)adminというディレクトリのみを拒否対象にする場合

Disallow: /admin/

巡回の拒否(Disallow:)、クローラーの受け入れ(Allow:)の記述の前には、対象となるクローラーのユーザーエージェント名を記述します。この記述がないときはすべてのクローラーに対する指示(「*」と同様)とみなされます。

クローラー名

Allcoupon Spider/1.0(+https://allcoupon.jp/)

また、robots.txtが設置されていない場合、サイトに対する巡回の制限はないものとみなされます。掲載されるまでには時間がかかるため、すぐに設定の内容が反映されるわけではありません。


ページの先頭へ