Il rapporto Indicizzazione delle pagine e il Controllo URL

Modulo 2: Search Console, Bing e IndexNow · Tempo di lettura: 13 minuti

Obiettivo della lezione: Dopo questa lezione saprà vedere nel rapport Indicizzazione delle pagine quali pagine non sono nell'indice e perché, esaminare una singola pagina con il Controllo URL, e saprà che cosa fanno e non fanno Richiedi indicizzazione, Rimozioni e Azioni manuali.

Concetti chiave: rapporto Indicizzazione delle pagine, indicizzata, non indicizzata, motivi, Convalida correzione, Controllo URL, Testa URL live, Richiedi indicizzazione (quota), URL canonico dichiarato dall'utente e URL canonico selezionato da Google, Visualizza pagina sottoposta a test, Rimozioni (temporanee), Azioni manuali, Problemi di sicurezza

Il rapporto Indicizzazione delle pagine

Nella lezione 1.3 ha letto che non tutte le pagine entrano nell'indice. Il rapporto Indicizzazione delle pagine (nel menu sotto Indicizzazione, Pagine) mostra come va per il Suo sito. In alto ci sono due numeri: indicizzate e non indicizzate. Sotto si trova la tabella "Perché le pagine non sono indicizzate", con il numero di pagine per ogni motivo.

Prima la cosa più importante: l'obiettivo non è che tutto venga indicizzato. Google stesso scrive che occorre assicurarsi che la versione canonica di ogni pagina importante sia nell'indice, e che non bisogna aspettarsi il cento per cento. Un sito con tag, filtri, pagine di ricerca e varianti ha sempre pagine che giustamente non vi compaiono. La domanda è quindi sempre: c'è tra queste una pagina che invece dovrebbe esserci?

I motivi in parole semplici

Ci sono inoltre due avvisi: Indicizzata, ma bloccata da robots.txt (Google ha incluso l'indirizzo senza leggerne il contenuto, spesso perché ci sono link che puntano lì) e Pagina indicizzata senza contenuti.

Faccia clic su un motivo per vedere indirizzi di esempio. Se ha corretto qualcosa, può scegliere Convalida correzione. Google ricontrolla allora gli indirizzi noti con quel problema; secondo Google questo richiede di solito fino a circa due settimane. Non faccia clic più volte: attenda che la convalida sia riuscita o non riuscita. La correzione funziona comunque anche senza convalida; Google la vede alla scansione successiva.

Il Controllo URL: una pagina sotto la lente

In alto in Search Console c'è una barra di ricerca. Incolli lì un indirizzo completo del Suo sito e otterrà il Controllo URL. Vede prima che cosa Google ha nell'indice: "L'URL è su Google" oppure "L'URL non è su Google", e sotto Indicizzazione delle pagine, tra l'altro:

• quando Google ha scansionato la pagina l'ultima volta, e sottoposta a scansione come (il crawler per dispositivi mobili o per desktop);
• se il robots.txt consente la scansione, e Indicizzazione consentita? (c'è un noindex?);
• Recupero pagina: il recupero è riuscito?
• l'URL canonico dichiarato dall'utente (ciò che Lei ha indicato nel canonical) e l'URL canonico selezionato da Google (ciò che Google ha scelto).

Questo è lo stato nell'indice, non una misurazione in tempo reale. Se ha appena rimosso un noindex, qui risulta ancora presente.

Testa URL live

Con Testa URL live Google recupera la pagina adesso. Così verifica subito una correzione. Con Visualizza pagina sottoposta a test vede l'HTML dopo l'esecuzione del JavaScript, le intestazioni della risposta, i messaggi della console e, se il test è riuscito, uno screenshot. È il punto in cui controllare se il titolo, il canonical o i dati strutturati sono davvero presenti quando vengono inseriti con JavaScript.

Attenzione: un test live riuscito non è una promessa. Il test non valuta la qualità, i contenuti duplicati o la scelta del canonical.

Richiedi indicizzazione

Dopo un test live può scegliere Richiedi indicizzazione. Google mette allora la pagina in coda per la scansione. Tre cose da sapere:

1. Esiste una quota giornaliera per property. Per molte pagine insieme la strada giusta è una sitemap (lezione 2.2).
2. Richiederla più volte per la stessa pagina non la rende più veloce.
3. Non è una garanzia: la scansione può richiedere da giorni a settimane, e poi Google decide ancora se includerla.

La usi quindi per una nuova pagina importante o dopo una correzione, non come routine quotidiana.

Può controllare solo indirizzi di una property di cui è proprietario o utente. Se vuole esaminare la pagina di qualcun altro, usi strumenti pubblici come il Test dei risultati avanzati (modulo 5).

Altri tre rapporti da conoscere

Rimozioni. Con questo strumento toglie una pagina dai risultati di ricerca in modo temporaneo (circa sei mesi), per esempio se per errore erano online dati personali. La pagina resta nell'indice. Se vuole eliminarla in modo permanente, faccia in modo che restituisca un 404 o un 410, che sia protetta da password o che abbia un noindex. Il robots.txt non è adatto a questo scopo: una pagina bloccata non può essere letta da Google, che quindi non vede nemmeno il noindex.

Azioni manuali. Un'azione manuale significa che un dipendente di Google ha accertato che alcune pagine violano le norme sullo spam (lezione 8.2), per esempio con testo nascosto o link innaturali. Quelle pagine possono scendere di posizione o sparire dai risultati. Se qui non c'è alcuna segnalazione, va tutto bene. Se invece c'è qualcosa: lo corregga su tutte le pagine e poi invii una richiesta di riconsiderazione.

Problemi di sicurezza. Qui Google segnala se il Suo sito sembra compromesso o diffonde software dannoso. I visitatori possono allora vedere un avviso. È un'emergenza: per il ripristino consulti il corso WordPress e Sicuro online.

In pratica: dopo un nuovo sito

Lotte (Bloemenatelier Lotte) ha messo online il suo nuovo sito con l'AI Builder e ha dimenticato che il sito era ancora impostato su "non indicizzare". Dopo una settimana vede in Indicizzazione delle pagine quasi tutto sotto "Bloccata da robots.txt". Cambia l'impostazione e pubblica di nuovo, controlla la sua homepage, vede nel test live che scansione e indicizzazione ora sono consentite, e richiede l'indicizzazione per la homepage e per la pagina Bruidswerk (addobbi per matrimoni). Per il resto attende la sitemap. In WordPress la stessa insidia si nasconde nella casella "Scoraggia i motori di ricerca dall'effettuare l'indicizzazione di questo sito", in altri website builder sotto un nome simile.

Riepilogo

• Indicizzazione delle pagine mostra le pagine indicizzate e non indicizzate con il motivo; non tutto deve esserci.
• Legga ogni motivo come una domanda: questa pagina deve stare nell'indice? Se sì, correggere e convalidare.
• Il Controllo URL mostra lo stato nell'indice; Testa URL live mostra la pagina adesso, anche dopo il JavaScript.
• Richiedi indicizzazione ha una quota, non aiuta se ripetuto e non garantisce nulla.
• Rimozioni è temporaneo; Azioni manuali e Problemi di sicurezza dovrebbero essere vuoti.

Quiz

Esercizio

Esercizio D2.4: Ispezionare una pagina. Scelga una pagina importante del Suo sito (per esempio la pagina con i Suoi servizi) e la controlli in Search Console. Annoti se è indicizzata, quando è stata scansionata l'ultima volta, quale canonical ha indicato Lei e quale ha scelto Google. Esegua poi un test live, apra la pagina sottoposta a test e verifichi se il titolo è presente nell'HTML. Infine guardi in Indicizzazione delle pagine quale motivo compare più spesso e se tra quelle pagine ce ne sono alcune che dovrebbero stare nell'indice.

Per approfondire

• Google, Rapporto Indicizzazione delle pagine: https://support.google.com/webmasters/answer/7440203?hl=nl
• Google, Strumento Controllo URL: https://support.google.com/webmasters/answer/9012289?hl=nl
• Google Search Central, Chiedere a Google di ripetere la scansione degli URL: https://developers.google.com/search/docs/crawling-indexing/ask-google-to-recrawl
• Google, Strumento Rimozioni: https://support.google.com/webmasters/answer/9689846?hl=nl
• Google, Rapporto Azioni manuali: https://support.google.com/webmasters/answer/9044175?hl=nl