では、検索サイトで上位表示のためにとる対策とは、どのようなものなのでしょうか。この対策を講じるためには、まずGoogleやYahoo!JAPANなどの検索サイトが全世界に星の数ほど存在するホームページをどのようにして探しだし、どのようにして内容を把握しているのかを知る必要があります。
ここで登場するのが、クローラーというわれる検索ロボットです。検索サイトは、インターネット上に公開されているホームページをロボットに巡回させて収集し、データベース化しています。そして、まだデータベースに収録されていないホームページや、更新されたホームページを発見しては内容を回収し、結果をデータベースに反映させています。
例えるなら、インターネットの町をロボットが日夜パトロールしていて、新しい店を発見したり、リフォームされた家を発見すると、本部に持ち帰って、地図に追加しているようなものです。