# ELENCO SPIDER DEI VARI MOTORI # Nome spider Motore di ricerca # googlebot Google # fast Fast - Alltheweb # slurp Inktomi - Yahoo! # scooter Altavista # mercator Altavista # Ask Jeeves Ask Jeeves # teoma_agent Teoma # ia_archiver Alexa - Internet Archive # Abilita tutti gli spider a tutte le pagine. # User-agent: * # Disallow: # Abilita tutti gli spider a tutte le pagine tranne # la cartella _old ed il file main1.asp in _old. User-agent: * Disallow: /_old/main1.asp Disallow: /_old/