WordPress は、記事の更新状況により robots.txtを自動生成してくれる。通常は自動生成されたrobots.txt に従いクローラがチェックしてくれる。ただし、NGINX に以下のような設定をしていたところアクセスができなくなっていた。
<NGINX xxx.conf>
:
location = /robots.txt {
allow all;
log_not_found off;
access_log off;
}
設定を削除して、phpと同様にアクセスをするように変更することで事象は解消した。
Xserver が お友達紹介割引 で申込みが可能になります。
コメント