Webcrawler

Ein automatisiertes Computerprogramm, das Informationen im Internet sammelt und kategorisiert.
Diese sind meistens Bots, die beispielsweise von Suchmaschinen eingesetzt werden, um Webseiten zu indexieren.