検索エンジンのクローラーは、評価の高いサイト、つまり自分好みになっているサイトにはよく足を運びます。

その好みに合わせてサイト作りをすると、巡回頻度が高くなり検索上位に表示されたりインデックス数が増える可能性も高まります。

まずクローラーはシンプルなサイトを好みます。

HTMLの記述に一貫性が無く、ゴチャゴチャしていると敬遠されがちです。

デザイン面のタグはCSSを使い、ソース内のメインとなるキーワードや文章が目立つようにしておくと良いでしょう。

またフレームページは適切に巡回出来ないことが多くSEOを考えるのであればご法度とされています。

サイト内にどんなページがあるのか一目でわかるようにしたページ「サイトマップ」や、現在いるページの位置を階層構造でリンクの一覧として示す「パンくずリスト」等を設置すると、クローラーが巡回しやすくなります。

これらを設置することにより訪問者が迷子になりにくく、ユーザビリティの面からも優れた設計であると言えます。

さらに高度な手法としてはサーバーサイドスクリプト言語を用いて行われるクローキングと呼ばれるものがあります。

これは一般の訪問者に見せるものとは別に、クローラー専用のページを作って巡回時にクローラーのみにそのページを見せるという手法です。

しかしこれはキーワードを不自然に詰め込んだり不正な行為が出来るため、多くの検索エンジンはスパムであるとしています。