検索エンジンクローラの訪問率を上げる10の方法

2008年06月26日

「Search Engine Journal」より検索エンジンクローラの訪問率を上げる10の方法という記事を
取り上げます。

検索エンジンのクローラのは基本的にユーザーに人気の高いサイトや
更新頻度の高いサイトの訪問率が高いと思うのですが実際はどうなんでしょうか？

１．記事を定期的に書いてpingを送る

最低でも週に３以上の更新が望ましいとしているようです。
もちろん毎日更新できるのなら毎日更新したほうがいいです。
しかもオリジナリティの高い記事ですね。

２．サーバーが正常に動作しているか確認する

その上でGoogleウェブマスターツールでインデックスされていないページなどをチェックしする。

サーバーの動作確認の推奨は「pingdom」と「mon.itor.us」の２つのツールです。

３．サイトの読み込み時間に注意する。

重い画像やPDFファイルなどをたくさん載せていると読み込みに時間がかかって
クローラはそのページを更新せずに離れていってしまいます。

４．サイトの内部リンク構造をチェックする

違うURLなのに内容が重複していない確認すること。
重複した記事の読み込みに時間をかけるほど、役に立つ独自のコンテンツのあるページがないと
判断します。

５．定期的にクローラが訪問しているサイトからリンクをもらう。

基本的にはこれは確かなんだろうけど、サイトテーマに関連性がなくてもいいのかどうか
というのがわからないですね。私的にはサイトテーマに関連性が必要だと思います。

ただし、絶対というわけではなく（友人のサイトなどの相互リンクなどもありますし）
そのほうがアドバンテージが統計的にあるという見方です。

６．Googleウェブマスターツールを使いクローラの訪問頻度を調整する。

スピードを調節することはできないと思いますが、サイトマップを読み込ませることで
滞りなくサイト内を巡回してもらうことは可能ですね。

７．サイトマップファイルを追加する。

ユーザー向けのサイトマップではなく、xmlファイルでのサイトマップです。
これは新規で作って追加する必要があるのでない人はこれを追加することでサイトの
下層ページまでクローラが巡回しやすくなります。

８．サーバーが正しくレスポンスヘッダを返しているか確認する。

エラーページやソースコードでのクローラーへの命令などがきちんと行われているかどうかです。
例えばrobotにインデックスを読み込ませたくなければno index,nofollow等の命令が
きちんと行われているかどうかですね。

９．各ページにそれぞれ独自の記事タイトルとmetaタグが記述されているか確認する。

１０．サイトのクローラの訪問率などをしっかり管理、チェックしておきましょう。

これら１０の方法はとりわけ基本事項で訪問率が上がるというよりは基本事項で
クローラを呼び込むための手段と捉えた方がいいです。

トラックバック（0）

このエントリーのトラックバックURL:
http://xsvx1025595.xsrv.jp/cgi/mt/mt-tb.cgi/59