クローラーは来ていたけれど...

アフィリエイト インテリジェンス


Warning: include() [function.include]: URL file-access is disabled in the server configuration in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 50

Warning: include(http://www.affiliate-i.biz/module/common-link.html) [function.include]: failed to open stream: no suitable wrapper could be found in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 50

Warning: include() [function.include]: Failed opening 'http://www.affiliate-i.biz/module/common-link.html' for inclusion (include_path='.:/usr/local/lib/php') in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 50

クローラーは来ていたけれど...

2007/01/08 21:59 コメント(0)» トラックバック(0)»

昨日書いた「クローラーが来てくれてませんでしたorz」の続きです。

今日、改めてGoogleサイトマップを見てみたところ、昨日は「クローラーが来てくれない」と思っていたのですが、実はクローラーはちゃんとやって来てたということが判明しました^^;

では、どうしてクローラーは来ているのにインデックスされないのか。Googleサイトマップでは、Googleのクローラー(Googlebot)が巡回できなかった理由が分かったりするのですが、そこに書かれていたエラーメッセージがコレ。

robots.txt にアクセスできません

ナンデスト(゜д゜;)

昨日、Googleサイトマップを利用し始めた際、「robots.txt」というテキストファイルはちゃんとサーバにアップしてあって、Googleサイトマップも「200 (成功しました)」なんて言ってくれてるのに!クローラーは来てくれてるのに上記理由で巡回してくれてないようなんですが、robots.txtをアップしてないサイトはちゃんとクロールされてたり...もう分からん.....orz

それと、Googleのロボットが最後に来てくれたのが10月11日。この翌日にサーバを移転(ロリポップからXREAに)してるんですよ。でも、同じタイミングで移転したこのアフィリエイト インテリジェンスにはちゃーんとクローラーが巡回してくれてて、インデックスもされてるんです。

オイラ、なんかしたのかな...。もしかしてサブドメインはダメとか?

もしこの辺の事情にお詳しい方がいらっしゃいましたら、ぜひ教えてくださいませm(_ _)m

【追記:2006/1/9 10:30】
この後、robots.txtを削除して、もう一回サイトマップを再送信してみました。で、今朝何気にGoogleサイトマップをチェックしたところ、トップページのURLがエラーリストから消えてました。おや?と思ってブログの名前で検索してみたところ、

uka.ssstyle.net/ - 39k - 2007年1月7日

フレッシュクロールキタ━(゚∀゚)━!日付が入ってるってことはちゃんと巡回してくれたってことですよね!?あとはGoogleサイトマップの「Googlebot が最後にお客様のホームページにアクセスした日」が1月7日になってくれればいいのですが.....。

【関連記事】
クローラーが来てくれてませんでしたorz
クローラーは来ていたけれど...
Googlebotの巡回、復活しました


Warning: include() [function.include]: URL file-access is disabled in the server configuration in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 141

Warning: include(http://www.affiliate-i.biz/module/pickup-info.html) [function.include]: failed to open stream: no suitable wrapper could be found in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 141

Warning: include() [function.include]: Failed opening 'http://www.affiliate-i.biz/module/pickup-info.html' for inclusion (include_path='.:/usr/local/lib/php') in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 141

同じカテゴリの最新記事

"クローラーは来ていたけれど..."へのトラックバック

トラックバック先URL


* トラックバックは管理者の承認後に表示されます。

トラックバック一覧

"クローラーは来ていたけれど..."へのコメント

コメントを投稿

* 名前欄にサイト名を入力してもSEO対策にならないよう設定してあります。
* また、記事に直接関係のないコメントはご遠慮願います。

上の情報を保存する場合はチェック

Warning: include() [function.include]: URL file-access is disabled in the server configuration in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 221

Warning: include(http://www.affiliate-i.biz/module/search-form.html) [function.include]: failed to open stream: no suitable wrapper could be found in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 221

Warning: include() [function.include]: Failed opening 'http://www.affiliate-i.biz/module/search-form.html' for inclusion (include_path='.:/usr/local/lib/php') in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 221

Warning: include() [function.include]: URL file-access is disabled in the server configuration in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 226

Warning: include(http://www.affiliate-i.biz/module/category.html) [function.include]: failed to open stream: no suitable wrapper could be found in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 226

Warning: include() [function.include]: Failed opening 'http://www.affiliate-i.biz/module/category.html' for inclusion (include_path='.:/usr/local/lib/php') in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 226

この記事の関連書籍 by 楽天ブックス


Warning: include() [function.include]: URL file-access is disabled in the server configuration in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 286

Warning: include(http://www.affiliate-i.biz/module/relation-link.html) [function.include]: failed to open stream: no suitable wrapper could be found in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 286

Warning: include() [function.include]: Failed opening 'http://www.affiliate-i.biz/module/relation-link.html' for inclusion (include_path='.:/usr/local/lib/php') in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 286

Warning: include() [function.include]: URL file-access is disabled in the server configuration in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 288

Warning: include(http://www.affiliate-i.biz/module/asp-list.html) [function.include]: failed to open stream: no suitable wrapper could be found in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 288

Warning: include() [function.include]: Failed opening 'http://www.affiliate-i.biz/module/asp-list.html' for inclusion (include_path='.:/usr/local/lib/php') in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 288

Warning: include() [function.include]: URL file-access is disabled in the server configuration in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 290

Warning: include(http://www.affiliate-i.biz/module/ga.html) [function.include]: failed to open stream: no suitable wrapper could be found in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 290

Warning: include() [function.include]: Failed opening 'http://www.affiliate-i.biz/module/ga.html' for inclusion (include_path='.:/usr/local/lib/php') in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 290

Warning: include() [function.include]: URL file-access is disabled in the server configuration in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 292

Warning: include(http://www.affiliate-i.biz/module/feed.html) [function.include]: failed to open stream: no suitable wrapper could be found in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 292

Warning: include() [function.include]: Failed opening 'http://www.affiliate-i.biz/module/feed.html' for inclusion (include_path='.:/usr/local/lib/php') in /virtual/afl-i/public_html/record/crawler_not_come_2.html on line 292