WWW上を自動的に巡回し、ウェブページや文書、画像などを取得しインデックスしていくプログラム。
ロボット型の検索エンジンや、統計の調査などに用いられる。
この巡回する動作のことをクローリングと呼ぶ。