Le Budget crawl est défini comme le nombre limite de pages que Google s’est fixé d’explorer sur un site web pour permettre son indexationt. Lors de l’exploration, le moteur de recherche essaye de contrôler ses tentatives pour ne pas surcharger le serveur du site, mais tout en prenant soin de ne pas ignorer les pages importantes. 

Pour retrouver le juste équilibre, Google va donc attribuer un Budget crawl différent à chaque site web sur la base de quelques critères comme : La réactivité du serveur, la taille du site, la qualité des contenus et la fréquence des mises à jour.

Pour classer les sites dans la Search Engine Result Page Google évalue principalement les données enregistrées par son robot lors de son passage sur chaque plateforme web.