Teilen:

Glossar / Lexikon

Wie funktioniert ein crawler?

05.12.2022 | von Patrick Fischer, M.Sc., Gründer & Data Scientist: FDS
Ein Crawler ist ein Programm, das durch das World Wide Web navigiert. Es folgt Links zu anderen Seiten und lädt deren Inhalt herunter, um ihn zu analysieren. So sammelt es Informationen über die Struktur des Netzes und speichert sie in einer Datenbank. Dabei kann es zum Beispiel alle verfügbaren Links oder alle Wörter auf der Seite sammeln. Anschließend kann man diese Datenbank dann für verschiedene Zwecke verwenden, z.B. für Suchmaschinen, für Preisvergleiche oder für Wissenschaftliche Forschung.
Gefällt mir (0)
Kommentar

Unser Angebot an Sie:

Medien- und PR-Datenbank 2024

Nur für kurze Zeit zum Sonderpreis: Die Medien- und PR-Datenbank mit 2024 mit Informationen zu mehr als 21.000 Zeitungs-, Magazin- & Hörfunk-Redaktionen uvm.

Newsletter

Abonnieren Sie unseren Newsletter und erhalten Sie aktuelle Neuigkeiten & Informationen zu Aktionen: