Quasi ogni webmaster cerca di ottimizzare le pagine del proprio sito in modo da ottenere il maggior numero possibile di elementi indicizzati. Ma in alcuni casi, al contrario, è necessario nascondere alcune pagine, ad esempio un modulo per l'inserimento dei dati di registrazione, il recupero delle password, ecc.
È necessario
Modifica del file Robots.txt
Istruzioni
Passo 1
Il modo più semplice per chiudere l'indicizzazione di più sezioni o di un intero sito specifico è inserire le voci appropriate nel file robots.txt. Viene utilizzato come guida per i motori di ricerca. Quando si entra nelle pagine del sito, il robot di ricerca fa riferimento a questo file, se non c'è indicizza l'intero sito, altrimenti segue le raccomandazioni specificate in questo file.
Passo 2
Se hai creato il tuo sito da solo e non disponi di tale applicazione, sotto forma di un documento di testo che indica i divieti, è facile crearlo da solo. Aprire un nuovo documento di testo, ad esempio, utilizzando il programma Blocco note. Inserisci le seguenti righe nel corpo del documento: User-agent: * Disallow: /file.htmlDisallow: / directory /
Passaggio 3
Ora cerchiamo di capire cosa hai chiesto al motore di ricerca come attività. Il segno "*" di fronte allo User-agent significa che questa istruzione deve essere eseguita da assolutamente tutti i file system. Ad esempio, se scrivi "Yandex" invece di "*", questo appello verrà letto solo dal robot del motore di ricerca Yandex. Le istruzioni Disallow vietano l'indicizzazione di una specifica sezione (directory) o file (file.html).
Passaggio 4
Dopo aver compilato il file robots.txt, puoi andare direttamente ai testi nelle pagine del sito. Come sai, ai motori di ricerca non piace avere più di 3 link attivi esterni sulle tue pagine. E se hai bisogno di sangue dal naso ma pubblichi 5 o più link. In questi casi, puoi utilizzare un attributo o un tag.
Passaggio 5
Per chiudere i link dall'indicizzazione da parte del motore di ricerca Google, è necessario portare il link nella seguente forma: anchor links. Il corpo dell'attributo deve essere inserito in qualsiasi parte del collegamento, non dimenticando di separarlo con uno spazio, ad es. l'attributo può essere posizionato tra "a" e "href" o tra il collegamento e il suo ancoraggio.
Passaggio 6
Per chiudere i collegamenti dall'indicizzazione da parte del motore di ricerca Yandex, è necessario portare il collegamento nel seguente modulo: collegamento di ancoraggio. Il tag viene posizionato all'inizio e alla fine del collegamento. Non dimenticare che questo tag è abbinato: la seconda parte, a differenza della prima, viene fornita con un segno "/".