「はてな」のページがクロールされやすい理由

「はてな」のURLが検索エンジンに見つけてもらいやすいのは何故？という質問がはてなにありました。

はてなに載ったURLはクロールされやすい（検索エンジンのロボットに見つけてもらいやすい）ようですが、その理由を説明しているサイトがあれば教えて下さい。（はてな）

Google、YST、Ask.jp、MSNサーチなど最近のロボット型検索エンジンはいずれもリンクを辿ってくまなくウェブを巡回し、新しく見つけたURLを登録していきます。従って、(1)外部サイトからターゲットサイト（ページ）へのリンクが多数あること、(2)ターゲットサイト内において適度にリンクが張り巡らされていること　の条件を満たしているサイトは検索エンジンにクロールされやすい（＝登録されやすい）わけです。

はてなの場合、外部のサイト（例えばブログ）がはてなの質問や回答を引用することが多数あります。また、はてな内部のリンクを見てもある１つの質問に対してたどり着けるリンクが複数あります。画面上部の「質問一覧」からのリンクを辿っても、また画面中央付近にある「カテゴリー一覧」からのリンクを辿ってもいけますね。

また、頻繁に更新されているサイトですからクローラの巡回頻度も多めになっていることもページ新規作成後または更新後にインデックスに反映されやすいといえます。