Usa il Controllo Meta Robots in Massa per confrontare le direttive noindex e nofollow su un massimo di 20 URL pubblici. Lo strumento legge i tag robots HTML e gli header di risposta X-Robots-Tag, quindi raggruppa i risultati osservati per l'ambito del crawler selezionato. Puoi individuare un'esclusione inattesa in più modelli di pagina o verificare esclusioni deliberate dopo una modifica. Il rapporto descrive le risposte che lo strumento ha potuto leggere; non stabilisce se Google abbia indicizzato quelle pagine.
Scegli un gruppo di URL utile e l'ambito del crawler
Parti dalle pagine interessate dalla modifica da verificare. Dopo aver cambiato un modello di prodotto, includi diversi URL di prodotti e una pagina di categoria. Dopo una migrazione, includi le pagine di destinazione importanti e gli URL che devono reindirizzare. Un piccolo gruppo rappresentativo permette di confrontare tipi di pagina diversi; non dimostra che l'intero sito si comporti allo stesso modo.
Stabilisci quali pagine devono poter comparire nella ricerca e quali hanno un'esclusione intenzionale. Una pagina di prodotto pubblica e una pagina di ringraziamento, per esempio, possono avere esigenze diverse. Un avviso noindex richiede attenzione quando contrasta con tale esigenza, non semplicemente perché mostra un'icona di avviso.
Incolla URL HTTP o HTTPS completi, uno per riga, senza superare 20 righe non vuote. Gli URL normalizzati ripetuti vengono controllati una sola volta, ma elimina i duplicati prima di inviare un elenco che supera il limite. Lo strumento controlla gli indirizzi forniti; non scopre altre pagine del dominio e non importa una sitemap.
Seleziona Googlebot per interpretare le dichiarazioni generali insieme a quelle specifiche per Googlebot. L'opzione per i crawler generici considera le dichiarazioni generali. La scelta modifica quali istruzioni si applicano nel rapporto. Non trasforma la richiesta in una visita reale di Googlebot e non dimostra che Google riceva una risposta identica.
Leggi i risultati noindex, nessun noindex osservato e sconosciuto
Il riepilogo e i filtri raggruppano gli URL in base al risultato noindex osservato. L'avviso Noindex indica che è stata trovata un'istruzione noindex applicabile. Il badge verde Nessun noindex osservato indica che non è stata trovata tale istruzione, con copertura completa delle fonti applicabili. Sconosciuto significa che lo strumento non ha potuto stabilire un risultato negativo. Il verde non conferma l'indicizzazione e il badge neutro di risultato sconosciuto non significa che la pagina la consenta.
Leggi anche lo stato HTTP, l'URL finale e le prove accanto al risultato. Se un URL inviato reindirizza, le direttive descrivono la risposta finale raggiunta da questo controllo. Un codice di stato, da solo, non indica se sia presente una dichiarazione robots. Controlla anche il valore nofollow separato; il riepilogo non è un punteggio combinato delle due direttive.
Questi casi illustrativi mostrano come l'intento della pagina cambi l'azione successiva. Non sono risultati di una scansione di un sito reale.
| Intento della pagina | Prove lette | Come agire |
|---|---|---|
| Il prodotto pubblico deve comparire nella ricerca | Trovato noindex applicabile |
Individua il tag o l'header e indaga sull'esclusione involontaria |
| La pagina di ringraziamento deve restare fuori dalla ricerca | Trovato noindex intenzionale |
Verifica che dichiarazione e ambito del crawler corrispondano all'esigenza |
| L'articolo pubblico deve comparire nella ricerca | Nessun noindex; fonti lette completamente |
Prosegui con altri controlli di indicizzazione se l'articolo non appare nella ricerca |
| Qualsiasi pagina, fonte illeggibile | Nessun noindex confermato; copertura incompleta |
Indaga sulle prove mancanti prima di modificare le istruzioni |
Una risposta parziale può comunque fornire un risultato positivo certo: un header leggibile contenente noindex resta una prova anche quando l'HTML non è leggibile. La conclusione opposta richiede una copertura adeguata. Per un PDF o un'altra risorsa non HTML, la copertura HTML può essere Non applicabile; la fonte pertinente è l'header di risposta. Non applicabile e non disponibile descrivono situazioni diverse.
Controlla insieme i tag HTML e X-Robots-Tag
Un tag HTML e un header di risposta possono contenere istruzioni diverse. Supponi, per esempio, che l'HTML finale contenga:
<meta name="robots" content="index, follow">
La risposta contiene anche:
X-Robots-Tag: noindex
Aggiungere index all'HTML non neutralizza il noindex dell'header applicabile. La documentazione di Google sulle direttive robots spiega come si combinano più dichiarazioni e come le istruzioni restrittive risolvono i conflitti. In questo esempio, esamina l'impostazione dell'header invece di modificare ripetutamente il tag HTML. Il rapporto conserva fonte, crawler e valore originale di ogni dichiarazione per aiutarti a trovare l'istruzione pertinente.
Conta anche l'ambito. Un tag generale robots con index, follow può coesistere con un tag googlebot con noindex. Selezionando Googlebot viene inclusa l'esclusione specifica; l'opzione generica considera le dichiarazioni generali. I risultati possono quindi differire senza che nessuno dei due controlli misuri l'indicizzazione effettiva su Google.
La forma abbreviata none significa sia noindex sia nofollow. Altre dichiarazioni possono richiedere un'interpretazione più dettagliata: indexifembedded, per esempio, riguarda contenuti incorporati altrove. Questo riepilogo in massa registra i due indicatori; non prende una decisione completa su ogni direttiva, situazione di incorporamento o funzionalità di ricerca. Conserva le prove originali quando occorre indagare su un'eccezione.
Tieni nofollow separato dall'indicizzazione
Noindex riguarda l'inclusione della pagina nei risultati di ricerca. Il nofollow a livello di pagina riguarda il seguire i link presenti nella pagina. La dichiarazione noindex, follow non è di per sé contraddittoria: il proprietario può voler escludere la pagina lasciando i suoi link disponibili per la scoperta. Valuta queste scelte rispetto allo scopo della pagina, senza considerare ogni direttiva limitante un errore.
Il controllo in massa riporta le dichiarazioni a livello di pagina. Non esamina l'attributo rel="nofollow", sponsored o ugc di ogni link, quindi un risultato No per nofollow a livello di pagina non stabilisce come sia contrassegnato ogni singolo link.
Le indicazioni di Google sulla qualificazione dei link spiegano inoltre che gli URL collegati possono essere scoperti da altre fonti. Un nofollow osservato qui non dimostra che tali destinazioni non saranno mai sottoposte a scansione o indicizzate. Se vuoi sapere se questa pagina ha un'esclusione, torna alle sue prove noindex.
Indaga sui risultati sconosciuti prima di cambiare direttive
Parti dalla copertura e dalle prove, senza presumere che manchi un tag. Una richiesta fallita, un documento illeggibile o una dichiarazione non supportata possono impedire allo strumento di decidere. Se esiste un URL finale, verifica che sia la destinazione prevista. Un reindirizzamento a una pagina di accesso o una risposta di accesso negato non descrivono il normale contenuto pubblico della pagina originale.
Questo strumento legge la risposta HTTP; non esegue JavaScript per costruire una pagina renderizzata. Le istruzioni inserite solo dopo l'esecuzione degli script non rientrano in questa vista. Analogamente, una pagina che richiede l'accesso, blocca l'accesso automatico o varia la risposta in base al visitatore può non esporre il contenuto che vedi nel browser. Non rimuovere direttive utili solo per far diventare verde una riga sconosciuta. Prima accerta cosa sia stato effettivamente letto, poi riprova quando la risposta pubblica è disponibile.
Usa il Noindex Checker quando un URL richiede un esame più approfondito di dichiarazioni ed eccezioni. Conserva il risultato in massa come riferimento di confronto mentre indaghi separatamente su quella pagina.
Il permesso di scansione è un'altra questione. Questo strumento non legge robots.txt; usa il Robots.txt Tester per tali regole sui percorsi. Google deve poter accedere a una pagina per osservare la sua istruzione noindex. Combinare un blocco della scansione con un'esclusione richiede quindi un controllo di accesso separato, anche quando questo strumento riesce a recuperare l'URL.
Esporta i risultati e ricontrolla le stesse pagine
Filtra il gruppo da indagare prima di scaricare il CSV. Il CSV contiene URL e classificazione dello stato delle righe visibili. È un elenco di lavoro compatto, non un'esportazione completa delle prove robots: non comprende ogni dichiarazione originale, il valore nofollow o tutti i dettagli della risposta. Scarica il rapporto completo in JSON quando il destinatario ha bisogno di prove dettagliate e informazioni sulla copertura.
Per una correzione riproducibile:
- Conserva insieme gli URL inviati, l'ambito del crawler selezionato e il rapporto originale. Annota il comportamento previsto per ogni pagina accanto ai risultati.
- Individua la fonte della dichiarazione. Correggi un tag HTML involontario nella pagina o nel modello pertinente; correggi un header involontario nell'impostazione che lo pubblica. Mantieni le esclusioni deliberate.
- Ripeti lo stesso gruppo e lo stesso ambito dopo che le risposte pubbliche aggiornate sono disponibili. Confronta le prove originali oltre ai conteggi; un totale invariato può nascondere un insieme diverso di URL.
- Indaga separatamente sulle righe che restano sconosciute, senza contarle come risolte.
Se la risposta aggiornata è corretta ma il risultato di Google non è cambiato, questa istantanea non basta a spiegarne lo stato di elaborazione. Le indicazioni di Google per risolvere i problemi di noindex rimandano ai rapporti Controllo URL e Indicizzazione delle pagine per verificare cosa abbia ricevuto Google. Un nuovo controllo riuscito conferma la risposta attualmente osservata, non una nuova scansione immediata o un risultato di ricerca promesso.