searchbot

デジタル大辞泉

サーチボット【searchbot】

読み方：さーちぼっと

サーチエンジンのデータベースを作成するための専用のプログラム。膨大な数のウェブサイトを自動的に巡回してデータ収集をする。この方式で作成されたサーチエンジンをロボット型サーチエンジンという。検索ロボット。インデクシングロボット。ウェブボット。ウェブクローラー。クローラー。スパイダー。

IT用語辞典バイナリ

クローラ

別名：クローラー，Webクローラ，検索ロボット，サーチボット
【英】crawler, web crawler, search robot, searchbot

クローラとは、インターネット上のあらゆるWebサイトの情報を取得して、検索用データベース・インデックスを作成する自動巡回プログラムのことである。Webサイトを這う（クロールする）ことからこのような名称が付けられた。

クローラでは、WebサイトのHTMLに記載されているリンクをたどり、そのWebサイトがどのような内容なのか、どのような構造になっているのかなどを判断し、データベース化していく。クローラがアクセスできるファイル・情報はすべてデータベース化され、誰もが検索できるようになってしまうので、機密文書などに関してはアクセス権を設定するなどの注意が必要である。

近年では検索結果の上位に表示させるためのSEOとして、有名検索Webサイトのクローラの動きを特に意識したWebサイト構築が目立つようになってきている。

WWWのほかの用語一覧

検索エンジン：

検索サイト  検索エンジンスパム  後方一致検索  クローラ  クローキング  ググる  クローリング

>>検索エンジンカテゴリの他の用語