User-agent: * # Applica a tutti i bot
Disallow: /private_directory/ # Blocca /private_directory/
Request-rate: 1/5 # Visita al massimo una pagina ogni 5 secondi
Visit-time: 0700-0845 # Vista soo tra 7:00 AM e 8:45 AM UT (GMT)