Protocollo di esclusione robot: differenze tra le versioni
Contenuto cancellato Contenuto aggiunto
Nessun oggetto della modifica Etichette: Aggiunta di indirizzo e-mail Modifica da mobile Modifica da applicazione mobile |
m Bot: fix citazione web (v. discussione) |
||
Riga 10:
== Formato del file ''robots.txt'' ==
Il file utilizza un [[Protocollo di rete|protocollo]] molto semplice che permette di definire il robot al quale applicare la regola e le pagine e directory da non indicizzare.
Ogni riga del file contiene un record. Ogni record ha la seguente sintassi :
Riga 28:
User-agent: *
Disallow:
Per bloccare un intero sito, utilizza una barra.
Riga 63:
== Utilizzo ==
Una volta che il file robots.txt è stato creato deve essere inserito nella directory principale del dominio ed avere il nome esatto "robots.txt".
Se viene memorizzato in una directory diversa, i robot non lo troveranno in quanto di default effettuano la ricerca nella directory principale del dominio.
Se non si ha accesso alla directory principale di un dominio, è possibile limitare l'accesso utilizzando il META tag Robots.
Riga 74:
== Collegamenti esterni ==
*
*
{{Portale|internet|tecnologia|telematica}}
| |||