crawlen

 

Crawlen is een onderdeel van het zoekmachine-proces: het verzamelen van de informatie van websites.

Het werkt zo. Spiders of zoekbots gaan langs bij websites. Zo’n zoekbot stelt zich netjes voor (‘hallo, ik ben spiderbot xx’) en gaat aan het werk na toestemming van de website. Hij leest nauwkeurig wat er staat en kopieert alles wat hij vindt. Dat heet de crawl.

Na de crawl maken zoekmachines een index van alle gevonden informatie. Een zoekmachine zoekt in zijn eigen (gigantische) index en dus niet live op het web. Daarom kan een zoekopdracht ook zo snel gaan!

ZOEKBOTS doen een crawl, de zoekmachine maakt een INDEX. Zie de links

Verder leren

Hoe werkt een zoekmachine?

index

 


Terug naar Begrippenlijst