# robots.txt for http://www.mazzuccato.com/ #escludo tutti gli user agent dall'intera directory "amministrazione" User-agent: * Disallow: /_private/ Disallow: /bin/ Disallow: /Portale/Amministrazione/ Disallow: /Portale/_allegati/ Disallow: /Portale/out/ Disallow: /Portale/Catalogo/doc_prodotti/ #Escludo solo Google dal file doorway.htm User-agent: googlebot Disallow: /doorway.htm #da html.it #Escludiamo anche EmailCollector, un software che ricerca sulla rete indirizzi di e-mail per poi utilizzarli nello spam. User-agent: EmailCollector Disallow: / #Infine, escludiamo anche Teleport, l'offline browser noto per le sue capacità di sovraccaricare i server. User-agent: Teleport Disallow: / User-agent: baiduspider Disallow: /