カテゴリー「クローラー」の1件の記事

2008年4月29日 (火)

Pete-Spider Light

Pete-Spider Light/1.49ってAgentのクローラーがあった

気になったので調べてみるとロシアからきているらしい。
robots.txtも行儀読み取っているようだ。

host
62.118.12.190



続きを読む "Pete-Spider Light" »

投稿時刻 15:49 クローラー | | コメント (0) | トラックバック (0)

カテゴリー

SEO

サイトチェック

ドメイン・サーバー関連

ホームページ作成時に便利