--- title: Crawler (クローラー) slug: Glossary/Crawler tags: - Browser - Crawler - Glossary - Infrastructure - インフラ - クローラー - ブラウザー - 用語集 translation_of: Glossary/Crawler ---
ウェブクローラーは、よく bot や robot と呼ばれ、ウェブページからデータを収集するために自動的に{{glossary("World Wide Web","ウェブ")}}を閲覧するものです。一般的に、 (Google や Bing などの) 検索エンジンは、クローラーを用いてインデックスを構築します。