« リダイレクト検証ツール | メイン | metaタグ生成ツール »

2008年3 月 6日 (木)

robots.txt解析ツール

robots.txtといえば、サイトURLやトップディレクトリに入れて、検索エンジンクローラーに、このページはインデックスしないでください、巡回頻度はこうしてください、このクローラーは来ないでください等など要望をいうファイルです。


ロボットエンジンに対する要望として
<meta name="robots" content="index" />
<meta http-equiv="pragma" content="no-cache" />
というタグもあります。

書き方は、こちらでも参考にしてください。
http://www.hyperposition.com/ranking/robotstxt.html

robots.txtをチェックする方法としていくつかあります。



FXの口座開設+取引のキャッシュバックでSEO関連費用に充てよう

Googlesitemap機能を活用する方法

Robots01

firefoxのアドオンを活用して直接見る方法
SEOpenというSEOチェックツール:firefoxのアドオン

住さんのサイト、robots.txtのチェックツールを活用する方法

robots.txt解析ツール



FXの口座開設+取引のキャッシュバックでSEO関連費用に充てよう



この記事(robots.txt解析ツール)を応援してください。

トラックバック

この記事のトラックバックURL:
最後の「00」を削除してください(機械的自動TB防止のため
http://www.typepad.jp/services/trackback/6a0128774bca1a970c0120a849e510970b00

Listed below are links to weblogs that reference robots.txt解析ツール:

コメント

コメントを投稿

カテゴリー

SEO

サイトチェック

ドメイン・サーバー関連

ホームページ作成時に便利

Copyright (C) 2008 SEOwalker All Rights Reserved.
著作権は放棄しません。リンクはどのページでもご自由にどうぞ。