Programm zur automatischen Erstellung des Index von Webseiten, normalerweise als Grundlage für einen Internet-Suchdienst (z.B. webcrawler.com).