助太刀忍者(質問掲示板)

助太刀忍者

No.53659    adsenseクローラのエラーを修正したい
現在、adsenseのクローラが一部のアドレスへの読み込みを拒否されていると表示されます。

アドレスは
http://sho5pine.kyotolog.net/hoge/TemplatePreView/USED/

しかし、robots.txtには  Disallow: /hoge/と記述されているので読み込み自体がされないはずなのですがエラーが常に出ます。

そこで、robots.txtを上書きしadsenseクローラの読み込みを許可したいのですが
通常のファイルローダからrobots.txtを上書きしても反映されません。

どういった対処をすればいいでしょうか?
使用環境
  • OS:Macintosh
  • ブラウザ:Google Chrome
  • モニター:1920×1080
  • JavaScript:ON
  • Cookie:ON
  • 回線種別:
  • ソフトウェア:
投稿者:sho5pine 投稿時間:2013-07-03 17:06:21
投稿者 : No Name Ninja
投稿時間:2013-07-04 17:26:44
そのURLは質問者のIDとパスワードを入力してログインしないと閲覧不可能な場所ですから
そもそもクローラーの対象になるのがおかしいですよね。

No.43323 googleのクロールエラー[robots.txt]について
No.47711 ウェブマスターツールで404エラー→コメントフォーム?
No.49048 過去記事について