#Esclusione tutti user agent da alcune cartelle User-agent: * Disallow: /cgi-bin/ Disallow: /path/ #Esclusione Netmechanic che offre servizi di controllo web User-agent: NetMechanic Disallow: / #Esclusione EmailCollector che ricerca sulla rete indirizzi di e-mail User-agent: EmailCollector Disallow: / #Esclusione Teleport browser offline browser che sovraccarica i server User-agent: Teleport Disallow: /