Tag noindex
Con la direttiva noindex dici ai motori di ricerca che una pagina non deve essere inclusa nell'indice di ricerca. La imposti come meta tag nell'intestazione della pagina o come header HTTP. A differenza del robots.txt, noindex non controlla la scansione, ma se una pagina richiamata compare nei risultati.
Come imposti noindex
- Meta tag nell'intestazione della pagina: vale per tutti i motori di ricerca che conoscono la direttiva.
- Meta tag solo per Google:
googlebotinvece dirobotscome nome. - Header HTTP
X-Robots-Tag: la soluzione per file senza HTML come PDF, immagini e video.
<!-- per tutti i motori di ricerca -->
<meta name="robots" content="noindex">
<!-- solo per Google -->
<meta name="googlebot" content="noindex">
<!-- combinare noindex con altre direttive -->
<meta name="robots" content="noindex, nofollow">
# Apache: non far indicizzare i file PDF
<FilesMatch ".pdf$">
Header set X-Robots-Tag "noindex"
</FilesMatch>
La pagina deve restare richiamabile
Google deve caricare la pagina per vedere la direttiva. Se la pagina è bloccata nel robots.txt, noindex resta invisibile e l'indirizzo può comunque comparire nei risultati se altre pagine lo linkano. Non bloccare quindi una pagina nel robots.txt se deve sparire dall'indice.
Una riga noindex nel robots.txt stesso Google non la considera. Altri motori di ricerca possono interpretarla diversamente, la pagina può continuare a comparire lì.
Quanto ci vuole
Google viene a sapere della modifica solo al successivo richiamo della pagina. Per pagine meno importanti possono volerci mesi. Con l'ispezione dell'URL in Google Search Console puoi sollecitare un nuovo richiamo. Per una rimozione rapida Google rimanda allo strumento di rimozione di Search Console, che nasconde temporaneamente una pagina.
Quando noindex è adatto
- Pagine senza valore di ricerca proprio: risultati di ricerca interni, combinazioni di filtri, pagine di conferma e di ringraziamento
- Aree per visitatori che non devono comparire nei risultati, ad esempio bozze o versioni per la stampa
- File come i PDF che non vuoi nella ricerca
Quando no
- Pagine duplicate: qui un canonical è la scelta migliore, perché accorpa i segnali (vedi Contenuti duplicati).
- Contenuti riservati: noindex non nasconde nulla ai visitatori. Proteggi tali pagine con un login.
- Controllo della scansione: Google continua a richiamare la pagina per verificare il noindex. Non serve a risparmiare tempo di scansione (vedi Crawl budget).
Errori frequenti
- noindex e blocco nel robots.txt insieme: la direttiva non viene mai letta.
- Dimenticare noindex nel template: una direttiva dell'ambiente di test che migra con la messa online toglie l'intero sito dall'indice.
- Pagina nella sitemap e con noindex: è contraddittorio. Nella sitemap vanno solo le pagine che devono comparire.
- Direttive diverse su mobile e desktop: Google valuta la versione mobile (vedi Indicizzazione mobile-first).
- Contare sull'effetto dei link: se i link di una pagina noindex vengano valutati a lungo termine non è garantito.
Termini correlati
- robots.txt: controllare la scansione
- Contenuti duplicati: accorpare le pagine duplicate
- Sitemap.xml: segnalare gli indirizzi ai motori di ricerca
- Google Search Console: verificare l'indicizzazione
Fonti
- Google Search Central: Bloccare l'indicizzazione con la regola noindex