Se Google non indicizza il tuo sito web, allora sei praticamente invisibile. Non ti presenterai per nessuna query di ricerca e non otterrai alcun tipo di traffico organico. 

Dato che sei qui, immagino che questa non sia una novità per te. Quindi mettiamoci subito al lavoro.

Questo articolo ti insegna come risolvere uno di questi tre problemi:

  1. Il tuo intero sito web non è indicizzato.
  2. Alcune delle tue pagine sono indicizzate, ma altre no.
  3. Le tue pagine web appena pubblicate non vengono indicizzate abbastanza velocemente.

Ma prima, assicuriamoci di essere sulla stessa lunghezza d’onda e comprendiamo appieno questo pasticcio di indicizzazione.

Google scopre nuove pagine web eseguendo la scansione  del Web e quindi aggiunge tali pagine al proprio indice . Lo fanno utilizzando un web spider  chiamato Googlebot .

Confuso? Definiamo alcuni termini chiave.

  • Scansione : il processo di seguire i collegamenti ipertestuali sul Web per scoprire nuovi contenuti.
  • Indicizzazione : il processo di archiviazione di ogni pagina Web in un vasto database.
  • Ragno Web : un software progettato per eseguire il processo di scansione  su larga scala.
  • Googlebot : ragno web di Google .

Ecco un video di Google  che spiega il processo in modo più dettagliato:

Quando cerchi qualcosa su Google, chiedi a Google di restituire tutte le pagine pertinenti dal loro indice. Poiché spesso ci sono milioni di pagine adatte al conto, l’algoritmo di ranking di Google fa del suo meglio per ordinare le pagine in modo da visualizzare prima i risultati migliori e più pertinenti.

Il punto critico che sto sottolineando qui è che l’indicizzazione  e il posizionamento  sono due cose diverse .

L’indicizzazione si sta presentando per la gara; la classifica sta vincendo

Non puoi vincere senza prima presentarti alla gara.

Vai su Google, quindi cercasite:yourwebsite.com

come verificare se sei indicizzato su google

come verificare se sei indicizzato su google

Questo numero mostra approssimativamente quante delle tue pagine Google ha indicizzato.

Se desideri controllare lo stato dell’indice di un URL specifico, utilizza lo stesso site:yourwebsite.com/web-page-slug operatore .

Nessun risultato verrà visualizzato se la pagina non è indicizzata.

Ora, vale la pena notare che se sei un utente di Google Search Console  , puoi utilizzare il rapporto Copertura  per ottenere una visione più accurata dello stato dell’indice del tuo sito web. Basta andare su:

Google Search Console > Indice > Copertura

Guarda il numero di pagine valide (con e senza avvisi).

Se questi due numeri totalizzano tutt’altro che zero, allora Google ha indicizzato almeno alcune delle pagine del tuo sito web. In caso contrario, allora hai un grave problema perché nessuna delle tue pagine web è indicizzata.

NOTA A MARGINE.

Non sei un utente di Google Search Console? Iscrizione. È gratis. Chiunque gestisca un sito Web e si preoccupi di ottenere traffico da Google dovrebbe utilizzare Google Search Console. È così  importante.

Puoi anche utilizzare Search Console per verificare se una pagina specifica è indicizzata. Per farlo, incolla l’URL nello strumento Controllo URL .

Se quella pagina è indicizzata, dirà “L’URL è su Google”.

Se la pagina non è indicizzata, vedrai le parole “L’URL non è su Google”.

Hai scoperto che il tuo sito web o pagina web non è indicizzato in Google? Prova questo:

  1. Vai alla console di ricerca di Google
  2. Passare allo strumento di controllo URL
  3. Incolla l’URL che desideri venga indicizzato da Google nella barra di ricerca.
  4. Attendi che Google controlli l’URL
  5. Fare clic sul pulsante “Richiedi indicizzazione”.

Questo processo è una buona pratica quando pubblichi un nuovo post o pagina. Stai effettivamente dicendo a Google che hai aggiunto qualcosa di nuovo al tuo sito e che dovrebbero dargli un’occhiata.

Tuttavia, è improbabile che la richiesta di indicizzazione risolva i problemi sottostanti che impediscono a Google di indicizzare le vecchie pagine. In tal caso, seguire l’elenco di controllo riportato di seguito per diagnosticare e risolvere il problema.

1) Rimuovi i blocchi di scansione nel tuo file robots.txt

Google non indicizza l’intero sito web? Potrebbe essere dovuto a un blocco di scansione in qualcosa chiamato file robots.txt .

Per verificare la presenza di questo problema, vai su yourdomain.com/robots.txt .

Cerca uno di questi due frammenti di codice:

User-agent: Googlebot
Disallow: /

User-agent: *
Disallow: /

Entrambi comunicano a Googlebot che non è autorizzato a eseguire la scansione di nessuna pagina del tuo sito. Per risolvere il problema, rimuovili. È così  semplice.

Un blocco di scansione in robots.txt potrebbe anche essere il colpevole se Google non sta indicizzando una singola pagina web. Per verificare se questo è il caso, incolla l’URL nello strumento di controllo URL in Google Search Console. Fai clic sul blocco Copertura per visualizzare maggiori dettagli, quindi cerca “Scansione consentita? No: bloccato dall’errore “robots.txt”.

Ciò indica che la pagina è bloccata in robots.txt.

In tal caso, ricontrolla il file robots.txt per eventuali regole di “disallow” relative alla pagina o alla relativa sottosezione. Indicizzare un sito: 10 modi per convincere Google a farlo

 

 

Rimuovere dove necessario.

2) Rimuovi i tag noindex non autorizzati

Google non indicizzerà le pagine se dici loro di non farlo. Questo è utile per mantenere private alcune pagine web. Ci sono due modi per farlo:

Metodo 1: meta tag

Le pagine con uno di questi meta tag nella loro <head>sezione non verranno indicizzate da Google:

<meta name=“robots” content=“noindex”>
<meta name=“googlebot” content=“noindex”>

Questo è un tag meta robots e indica ai motori di ricerca se possono o meno indicizzare la pagina.

NOTA A MARGINE.

La parte fondamentale è il valore “noindex”. Se lo vedi, la pagina è impostata su noindex.

Metodo 2: X-Robots-Tag

I crawler rispettano anche l’intestazione della risposta HTTP X-Robots-Tag. Puoi implementarlo usando un linguaggio di scripting lato server come PHP, o nel tuo file .htaccess, o modificando la configurazione del tuo server.

Lo strumento di ispezione degli URL in Search Console ti dice se a Google è impedito di eseguire la scansione di una pagina a causa di questa intestazione. Basta inserire il tuo URL, quindi cercare “Indicizzazione consentita? No: ‘noindex’ rilevato nell’intestazione http ‘X-Robots-Tag'”

3) Includere la pagina nella mappa del sito

Una mappa del sito indica a Google quali pagine del tuo sito sono importanti e quali no. Può anche fornire alcune indicazioni sulla frequenza con cui devono essere nuovamente sottoposti a scansione.

Google dovrebbe essere in grado di trovare le pagine del tuo sito Web indipendentemente dal fatto che si trovino o meno nella tua mappa del sito, ma è comunque buona norma includerle. Dopotutto, non ha senso rendere difficile la vita a Google.

Per verificare se una pagina è presente nella tua Sitemap, utilizza lo strumento di ispezione degli URL in Search Console. Se visualizzi l’errore “L’URL non è su Google” e “Mappa del sito: N/D”, significa che non è nella tua mappa del sito o non è indicizzato.

Indicizzare un sito: 10 modi per convincere Google a farlo

Non usi Search Console? Vai all’URL della tua mappa del sito, in genere tuodominio.com/sitemap.xml , e cerca la pagina.

Queste pagine dovrebbero essere nella tua mappa del sito, quindi aggiungile. Al termine, fai sapere a Google che hai aggiornato la tua mappa del sito eseguendo il ping di questo URL:

http://www.google.com/ping?sitemap=http://yourwebsite.com/sitemap_url.xml

Sostituisci l’ultima parte con l’URL della tua sitemap. Dovresti quindi vedere qualcosa del genere:

Indicizzare un sito: 10 modi per convincere Google a farlo

Ciò dovrebbe accelerare l’indicizzazione della pagina da parte di Google.

4) Rimuovi i tag canonici non autorizzati

Un tag canonical indica a Google qual è la versione preferita di una pagina. Assomiglia a questo:

<link rel="canonical” href="/page.html/">

La maggior parte delle pagine non ha tag canonico o quello che viene chiamato tag canonico autoreferenziale. Ciò indica a Google che la pagina stessa è la versione preferita e probabilmente l’unica. In altre parole, vuoi che questa pagina venga indicizzata.

Ma se la tua pagina ha un tag canonico canaglia, potrebbe indicare a Google una versione preferita di questa pagina che non esiste. In tal caso, la tua pagina non verrà indicizzata.

Per verificare la presenza di un canonico, utilizza lo strumento di ispezione degli URL di Google. Vedrai un avviso “Pagina alternativa con tag canonico” se il canonico punta a un’altra pagina.

Indicizzare un sito: 10 modi per convincere Google a farlo

Se questo non dovesse essere presente e desideri indicizzare la pagina, rimuovi il tag canonical.

IMPORTANTE

I tag canonici non sono sempre cattivi. La maggior parte delle pagine con questi tag li avrà per un motivo. Se vedi che la tua pagina ha un set canonico, controlla la pagina canonica. Se questa è effettivamente la versione preferita della pagina e non è necessario indicizzare anche la pagina in questione, allora il tag canonical dovrebbe rimanere.

5) Verifica che la pagina non sia orfana

Le pagine orfane sono quelle senza collegamenti interni che puntano ad esse.

Poiché Google scopre nuovi contenuti eseguendo la scansione del Web, non è in grado di scoprire pagine orfane attraverso tale processo. Anche i visitatori del sito web non saranno in grado di trovarli.

Non sei sicuro che tutte le pagine che vuoi indicizzare siano nella tua sitemap? Prova questo:

  1. Scarica un elenco completo delle pagine del tuo sito (tramite il tuo CMS)
  2. Scansiona il tuo sito web (usando uno strumento come Site Audit di Ahrefs)
  3. Incrocia i due elenchi di URL

Tutti gli URL non trovati durante la scansione sono pagine orfane.

Puoi correggere le pagine orfane in due modi:

  1. Se la pagina non è importante , eliminala e rimuovila dalla mappa del sito.
  2. Se la pagina è importante , incorporala nella struttura dei link interni del tuo sito web.

6) Correggi i link interni nofollow

I collegamenti nofollow sono collegamenti con un tag rel=“nofollow”. Impediscono il trasferimento del PageRank  all’URL di destinazione. Google inoltre non esegue la scansione dei link nofollow.

Ecco cosa dice Google  in merito:

In sostanza, l’utilizzo di nofollow ci fa eliminare i link target dal nostro grafico generale del web.  Tuttavia, le pagine di destinazione potrebbero ancora apparire nel nostro indice se altri siti si collegano ad esse senza utilizzare nofollow o se gli URL vengono inviati a Google in una Sitemap.

In breve, dovresti assicurarti che tutti i collegamenti interni alle pagine indicizzabili siano seguiti.

7) Aggiungi link interni “potenti”.

Google scopre nuovi contenuti eseguendo la scansione del tuo sito web. Se trascuri di collegarti internamente alla pagina in questione, potrebbero non essere in grado di trovarla.

Una semplice soluzione a questo problema consiste nell’aggiungere alcuni collegamenti interni alla pagina. Puoi farlo da qualsiasi altra pagina web che Google può scansionare e indicizzare. Tuttavia, se vuoi che Google indicizzi la pagina il più velocemente possibile, ha senso farlo da una delle tue pagine più “potenti”.

Come mai? Perché è probabile che Google esegua nuovamente la scansione di tali pagine più velocemente delle pagine meno importanti.

CONSIGLIO PROFESSIONALE

Incolla la pagina da cui hai aggiunto il link interno nello strumento di controllo degli URL di Google. Premi il pulsante “Richiedi indicizzazione” per far sapere a Google che qualcosa nella pagina è cambiato e che dovrebbero eseguirne nuovamente la scansione il prima possibile. Ciò potrebbe accelerare il processo di scoperta del collegamento interno e, di conseguenza, la pagina che si desidera indicizzare.

8) Assicurati che la pagina sia preziosa e unica

È improbabile che Google indicizzi pagine di bassa qualità perché non hanno alcun valore per i suoi utenti.

Ecco cosa ha detto John Mueller di Google sull’indicizzazione nel 2018:

Implica che se vuoi che Google indicizzi il tuo sito web o la tua pagina web, deve essere “fantastico e stimolante”.

Se hai escluso problemi tecnici per la mancanza di indicizzazione, la colpa potrebbe essere la mancanza di valore. Per questo motivo, vale la pena rivedere la pagina con occhi nuovi e chiedersi: questa pagina è veramente preziosa? Un utente troverebbe valore in questa pagina se ci cliccasse sopra dai risultati di ricerca?

Se la risposta è no a una di queste domande, allora devi migliorare i tuoi contenuti.

9) Rimuovere le pagine di bassa qualità (per ottimizzare il “crawl budget”)

Avere troppe pagine di bassa qualità sul tuo sito web serve solo a sprecare il crawl budget .

Ecco cosa dice Google  in merito:

Lo spreco di risorse del server su [pagine a basso valore aggiunto] eliminerà l’attività di scansione da pagine che hanno effettivamente valore, il che potrebbe causare un ritardo significativo nella scoperta di ottimi contenuti su un sito.

Pensalo come un insegnante che valuta i saggi, uno dei quali è il tuo. Se hanno dieci saggi da valutare, arriveranno al tuo abbastanza velocemente. Se ne hanno cento, ci metteranno un po’ di più. Se ne hanno migliaia, il loro carico di lavoro è troppo alto e potrebbero non riuscire mai a valutare il tuo saggio.

Google afferma che “il crawl budget […] non è qualcosa di cui la maggior parte degli editori deve preoccuparsi” e che “se un sito ha meno di qualche migliaio di URL, la maggior parte delle volte verrà sottoposto a scansione in modo efficiente”.

Tuttavia, rimuovere pagine di bassa qualità dal tuo sito Web non è mai una brutta cosa. Non può che avere un effetto positivo sul crawl budget.

10) Costruisci backlink di alta qualità

I backlink dicono a Google che una pagina web è importante. Dopotutto, se qualcuno si collega ad esso, allora deve avere un certo valore. Queste sono pagine che Google vuole indicizzare.

Per la massima trasparenza, Google non si limita a indicizzare le pagine web con i backlink. Ci sono un sacco (miliardi) di pagine indicizzate senza backlink. Tuttavia, poiché Google considera più importanti le pagine con link di alta qualità, è probabile che esegua la scansione (e ripeta la scansione) di tali pagine più velocemente di quelle che ne sono sprovviste. Ciò porta a un’indicizzazione più rapida.

Indicizzazione ≠ ranking

Avere il tuo sito web o la tua pagina web indicizzati in Google non  equivale a classifiche o traffico.

Sono due cose diverse.

L’indicizzazione significa che Google è a conoscenza del tuo sito web. Ciò non significa che lo classificheranno per qualsiasi domanda pertinente e utile.

È qui che entra in gioco la SEO: l’arte di ottimizzare le tue pagine web per posizionarle in base a query specifiche.

In breve, la SEO implica:

  • Trovare ciò che i tuoi clienti stanno cercando;
  • Creazione di contenuti attorno a tali argomenti;
  • Ottimizzazione di quelle pagine per le parole chiave target;
  • Costruire backlink;
  • Ripubblicare regolarmente i contenuti per mantenerli “sempreverdi”.

Ecco un video  per iniziare con la SEO:

In conclusione:

Ci sono solo due possibili ragioni per cui Google non sta indicizzando il tuo sito web o la tua pagina web:

  1. Problemi tecnici impediscono loro di farlo
  2. Vedono il tuo sito o la tua pagina come di bassa qualità e senza valore per i loro utenti.

È del tutto possibile che esistano entrambi questi problemi. Tuttavia, direi che i problemi tecnici sono molto più comuni. I problemi tecnici possono anche portare alla generazione automatica di contenuto indicizzabile di bassa qualità (ad esempio, problemi con la navigazione a faccette). Non va bene.

Tuttavia, scorrere la lista di controllo sopra dovrebbe risolvere il problema dell’indicizzazione nove volte su dieci.

 


Stai cercando un Consulente SEO?

Se stai cercando un consulente seo conttattami a [email protected] o al numero 345-8541524.

La tua Azienda ha bisogno di un Corso SEO Aziendale?

Per maggiori informazioni contattati via mail  [email protected] o al numero 345-8541524.

Sei di Milano e hai bisogno di un Corso SEO?

Per maggiori informazioni contattati via mail  [email protected] o al numero 345-8541524.

Profilo Autore

Paolo Marzano
Paolo Marzano
Da oltre 10 anni mi occupo di strategie SEO per piccole e grandi aziende. L’obiettivo è aumentare e trasformare il traffico in Clienti.