Robots. txt fornisce direzione per motori di ricerca, tra cui Googlebot di Google. Creare il file nel blocco note e caricarlo nella directory principale del dominio. Google cerca automaticamente il file, ma è necessario impostare il file robots. txt per consentire Googlebot di eseguire la scansione del sito. È inoltre possibile specificare le sezioni del tuo sito che non volete Googlebot la ricerca per indicizzazione.
Istruzioni
1
Fare clic su Windows "Start" pulsante e il tipo "blocco note" nella casella di testo del menu. Premere "Invio" per aprire l'editor di testo.
2
Digitare il testo riportato di seguito per indicare a Googlebot di eseguire la scansione del sito:
Agente utente: *
Questo testo indica a tutti i bot per la scansione dell'intero sito.
3
Aggiungere tutte le sezioni "Disallow" in robots. txt. Per esempio, se si desidera impedire la cartella "privata", è possibile aggiungere il testo seguente al file:
Disallow: /private/
4
Premere i tasti "Ctrl" e "S" per salvare le modifiche. Denominare il file "robots. txt" e caricarlo sul tuo dominio del sito Web. Ogni host di dominio offre diversi metodi per caricare file, quindi la procedura di upload dipende dalle autorizzazioni e carica le applicazioni fornite dall'host.