--- title: "Wat is Crawl budget? Uitleg en betekenis | Keurig Online" description: "Crawl budget is het aantal URL's dat een zoekmachine zoals Google op je website kan en wil crawlen." canonical: https://www.keurigonline.nl/begrippenlijst/crawl-budget last_modified: 2025-12-18 --- [Terug naar begrippenlijst](https://www.keurigonline.nl/begrippenlijst) # Crawl budget Crawl budget is het aantal URL's dat een zoekmachine zoals Google op je website kan en wil crawlen. Crawl budget is de hoeveelheid tijd en verzoeken die Google maximaal aan het crawlen van je website besteedt. Google bepaalt dat budget per hostnaam, dus www.jouwdomein.nl en shop.jouwdomein.nl hebben elk een eigen budget. Twee factoren bepalen het budget. De crawl capacity limit voorkomt dat Google je server overbelast. Reageert je server snel, dan crawlt Google meer, en bij trage antwoorden of serverfouten zoals een 503 juist minder. De crawl demand gaat over hoe graag Google je pagina's wil zien, en daarbij krijgen populaire en vaak gewijzigde pagina's voorrang. Voor de meeste websites is crawl budget geen probleem. Google noemt het vooral belangrijk voor sites met meer dan een miljoen pagina's, en voor sites vanaf 10.000 pagina's waarvan de inhoud dagelijks verandert. Een bedrijfssite met een paar honderd pagina's wordt meestal gewoon goed gecrawld. Verspil je budget niet aan URL's zonder waarde, zoals eindeloze filtercombinaties in een webshop, lange redirectketens en soft 404's. Blokkeer zulke URL's in robots.txt en houd je sitemap actueel. Het bestand robots.txt hoort in de hoofdmap van je site, op je hosting dus in public\_html. Een subdomein heeft een eigen robots.txt nodig, omdat het bestand alleen geldt voor de hostnaam waarop het staat. Hoe Google je site crawlt, zie je in Google Search Console onder Instellingen, in het rapport Crawlstatistieken. ## Geschiedenis Over de term crawl budget circuleerden lange tijd veel verschillende definities. In januari 2017 legde Gary Illyes van Google uit wat de term voor Googlebot betekent, in de blogpost [What Crawl Budget Means for Googlebot](https://developers.google.com/search/blog/2017/01/what-crawl-budget-means-for-googlebot). Hij noemde twee onderdelen: de crawl rate limit en de crawl demand. Belangrijke mijlpalen: - **16 januari 2017:** Google publiceert een eigen uitleg van crawl budget - **24 november 2020:** Search Console krijgt een [vernieuwd rapport Crawlstatistieken](https://developers.google.com/search/blog/2020/11/search-console-crawl-stats-report) - **8 januari 2024:** Google [stopt met de tool om de crawlsnelheid te beperken](https://developers.google.com/search/blog/2023/11/sc-crawl-limiter-byebye); Googlebot regelt dat nu zelf ## Bronnen 1. **Google Search Central** - [Crawl budget management for large sites](https://developers.google.com/search/docs/crawling-indexing/large-site-managing-crawl-budget) 2. **Google (2017)** - [What Crawl Budget Means for Googlebot](https://developers.google.com/search/blog/2017/01/what-crawl-budget-means-for-googlebot) 3. **Google Search Console Help** - [Crawl Stats report](https://support.google.com/webmasters/answer/9679690) 4. **Google (2020)** - [New and improved crawl stats for your site](https://developers.google.com/search/blog/2020/11/search-console-crawl-stats-report) ## Gerelateerde artikelen SEO 22 jun 2026 [Technische SEO checklist 2026: stappenplan voor snellere rankings](https://www.keurigonline.nl/blog/technische-seo-checklist-2026) - \[2\] ClickRank.ai (2026), [Is page speed a Google ranking factor?](https://www.clickrank.ai/is-page-speed-a-google-ranking-factor/): INP boven 200 ms geeft gemiddeld 0,8 tot 4 posities daling; INP boven 500 ms geeft 2 tot 4 posities daling na March 2026 update. - \[3\] Flewny.com / Gary Illyes (2026), [Google Core Updates 2026: Website Architecture & Crawl Budget](https://www.flewny.com/blog/google-january-2026-update-website-seo): Googlebot verwerkt slechts de eerste 2 MB HTML per pagina; mediane mobiele homepage weegt al circa 2,3 MB. SEMrush volatiliteitsscore March 2026 update: 9,5/10. - \[4\] Searchlab.nl (2026), [Technische SEO statistieken 2026 (Chrome UX Report NL)](https://searchlab.nl/statistieken/technische-seo-statistieken-2026): 48% van Nederlandse sites haalt alle CWV-drempelwaarden; 24% minder bounces en 27% meer organisch verkeer bij volledige CWV-compliance; HTTPS-adoptie NL 94%; 95,6% van Google top-10 pagina's gebruikt HTTPS; niet-mobiel-geoptimaliseerde sites verliezen gemiddeld 68% organisch mobiel verkeer; mediane LCP mobiel 3,8s vs. 2,1s desktop. WordPress 13 jan 2026 [301 redirect WordPress: zo behoud je SEO bij verwijderde pagina's](https://www.keurigonline.nl/blog/301-redirect-wordpress) **Hoe te voorkomen:** Test de *bestemming* van je redirect. Zorg dat de doelpagina laadt (HTTP 200 status). RankMath toont een waarschuwing als je naar een niet-bestaande pagina redirectt. ### ❌ Fout #7: te veel redirects tegelijk aanmaken **Het probleem:** Je maakt 500 redirects in één keer aan na een site-migratie. Google's crawler krijgt ineens honderden redirects te verwerken. Dit kan je crawl budget verspillen en rankings tijdelijk laten zakken. **Hoe te voorkomen:** Implementeer redirects gefaseerd. Begin met de pagina's met de meeste traffic/backlinks (high priority). Voeg de rest toe over meerdere weken. Monitor Google Search Console voor fouten. Lees ook [Google's officiële redirect guidelines](https://developers.google.com/search/docs/crawling-indexing/301-redirects) voor best practices. Hosting 15 dec 2025 [HTTP redirects: complete gids voor 301, 302, 307, 303 en 308 redirects instellen](https://www.keurigonline.nl/blog/http-redirects-gids) - **302/307 redirect**: Link equity blijft bij oude URL (niet overgedragen) - **303 redirect**: Niet relevant voor SEO (gebruikt voor forms) ### Crawl budget implications Redirect chains verspillen [crawl budget](https://developers.google.com/search/docs/crawling-indexing/large-site-managing-crawl-budget) oftewel het aantal pagina's dat Google crawlt per dag. **Impact van redirect chains**: