Waarom telt crawlbudget?

Verspil je crawlbudget aan onbelangrijke of foutieve pagina's (denk aan veel 404-fouten of dubbele URL's), dan blijft er minder over voor je waardevolle pagina's. Je stuurt het met robots.txt, een nette structuur en sterke interne links.