Meta Robots Tag

 

Bevat instructies voor spiders om een bepaalde pagina niet te indexeren en/of een link om de pagina niet te volgen. Sommige spiders negeren deze tag en indexeren deze pagina’s toch. Andere spiders indexeren de pagina’s maar, nemen geen links op in de zoekmachine resultaten.