Sitemap: http://www.edilbox.it/sitemap_edilbox.xml

User-agent: *
Disallow: /images/
Disallow: /css-style/
Disallow: /ilsole24ore/
Disallow: /includes/
Disallow: /rubriche/
Disallow: /javascript/
Disallow: /index/
Disallow: /geomateriali/  
Disallow: /galleria/  
Disallow: /barra.asp    
Disallow: /barra-centrata.asp  
Disallow: /barra-noscroll.asp   
Disallow: /barra_home.asp          
Disallow: /side-menu.asp 
Disallow: /testata.asp   
Disallow: /adv/
Disallow: /appalti-edili/

User-agent: Googlebot
Disallow: /edilizia/
Disallow: /appalti/
Disallow: /gare/
Disallow: /appalti-edili/

# Robots.txt file created by http://www.webtoolcentral.com
# For domain: http://www.edilbox.it

#  Escludiamo anche i robot di Netmechanic, il sito che offre servizi di controllo di siti Web cui non siamo interessati   
User-agent: NetMechanic
Disallow: /

#  Escludiamo anche EmailCollector, un software che ricerca sulla rete indirizzi di e-mail per poi utilizzarli nello spam. 
User-agent: EmailCollector
Disallow: /

#  Infine, escludiamo anche Teleport, l'offline browser noto per le sue capacitr di sovraccaricare i server. 
User-agent: Teleport
Disallow: /