Cosa sono le direttive Crawler? - Accuranker
Risorse Hub gratuite
Le direttive crawler indicano ai motori di ricerca come comportarsi durante il crawling e l'indicizzazione del sito web. Esempi di direttive crawler sono il meta tag robots, il tag x-robots e il file robots.txt.