De betekenis van Crawl budget

Inhoud

Wat is een crawl budget?

Het crawl budget is het aantal keren dat Google een website bezoekt om de inhoud in kaart te brengen.

Zelfs Google heeft beperkte middelen. Het kan onmogelijk elke URL van elke website op het internet meerdere keren per dag bezoeken om veranderingen op te pikken. 

Daarom geeft het elke site een crawl budget. Dit budget is een bepaalde hoeveelheid tijd die zoekmachines spenderen aan het crawlen en indexeren van een site. 

Hoe wordt het crawl budget bepaald?

Er zijn twee factoren die bepalen of een site vaak of minder vaak gecrawled worden:

  1. Populariteit: websites met veel backlinks en organische bezoekers krijgen een hoger crawl budget toegewezen dan minder populaire domeinen. 
  2. Updates: Google zal een hoger crawl budget toewijzen aan sites die regelmatig updates krijgen, denk bijvoorbeeld aan nieuwssites. 

Crawl stats

Google toont meer informatie over het crawlproces, inclusief fouten en frequentie, in Search Console. 

Ga hiervoor naar Settings > Crawl stats.

crawl budget in search console
Leer meer over andere online marketing termen:
Bounce rate is het percentage bezoekers dat een website verlaat na het bekijken van slechts één pagina.
Een alt text of alt attribute is een stukje HTML code die omschrijft wat er in een afbeelding te zien is.
Een 301-redirect stuurt bezoekers automatisch naar een nieuwe URL wanneer de originele is verplaatst of verwijderd. Zoekmachines zien dit als een permanente redirect.
Een URL parameter is een variabel stukje informatie in een URL om verkeer te tracken, een taal in te stellen of de content te filteren.
Googlebot is de naam van de crawlers/spiders die Google gebruikt om het web in kaart te brengen.
Een 404 error ontstaat wanneer iemand een URL probeert de bereiken die niet bestaat, bijvoorbeeld wanneer het adres verkeerd werd ingetypt of de URL nooit heeft bestaan.