#robots.txt for http://www.sogespe.it/ User-agent: * Disallow: /myasg/ Disallow: /Sogespe_old/ Disallow: /myasg/stat_js.asp User-agent: NetMechanic Disallow: / #Escludiamo anche EmailCollector, un software che ricerca sulla rete indirizzi di e-mail per poi utilizzarli nello spam. User-agent: EmailCollector Disallow: / #Infine, escludiamo anche Teleport, l'offline browser noto per le sue capacità di sovraccaricare i server. User-agent: Teleport Disallow: / Sitemap: http://www.sogespe.it/sitemap.xml