ウェブ‐クローラー【web crawler】
読み方：うぇぶくろーらー
クローラ
別名：クローラー，Webクローラ，検索ロボット，サーチボット
【英】crawler, web crawler, search robot, searchbot
【英】crawler, web crawler, search robot, searchbot
クローラとは、インターネット上のあらゆるWebサイトの情報を取得して、検索用データベース・インデックスを作成する自動巡回プログラムのことである。Webサイトを這う（クロールする）ことからこのような名称が付けられた。
クローラでは、WebサイトのHTMLに記載されているリンクをたどり、そのWebサイトがどのような内容なのか、どのような構造になっているのかなどを判断し、データベース化していく。クローラがアクセスできるファイル・情報はすべてデータベース化され、誰もが検索できるようになってしまうので、機密文書などに関してはアクセス権を設定するなどの注意が必要である。
近年では検索結果の上位に表示させるためのSEOとして、有名検索Webサイトのクローラの動きを特に意識したWebサイト構築が目立つようになってきている。
WebCrawler
出典: フリー百科事典『ウィキペディア（Wikipedia）』 (2023/02/02 03:32 UTC 版)
WebCrawler（ウェブクローラ）は、Google、Yahoo!、Bing、Ask.com、About.com、MIVA、LookSmart など有名な検索エンジンの検索結果を混合するメタ検索エンジン。オプションで画像、音声、動画、ニュース、イエローページ、ホワイトページの検索もできる。WebCrawler は InfoSpace, Inc. の登録商標である[1]。
- ^ “About WebCrawler”. WebCrawler. 2012年2月17日閲覧。
- ^ “WebCrawler Timeline”. Brian Pinkerton. 2012年2月17日閲覧。
- ^ "Webcrawler.com Site Info", Alexa, 2012年2月17日閲覧
- ^ "Webcrawler.com-- Quantcast Audience Profile", Quantcast, 2012年2月17日閲覧
- ^ "Site Profile for webcrawler.com", Compete, 2012年2月17日閲覧
[続きの解説]
「WebCrawler」の続きの解説一覧
- 1 WebCrawlerとは
- 2 WebCrawlerの概要
クローラ
「web crawler」の例文・使い方・用例・文例
- web crawlerのページへのリンク
