Crawling, indicizzazione e ranking

Le tre fasi che ogni pagina attraversa prima di poter apparire nei risultati.

Lezione
1/7
Tempo di lettura
8 min
Sezioni
5
Durante il corso
14%

I motori di ricerca lavorano in tre fasi. Capire in quale fase è bloccata una pagina è il modo più rapido per diagnosticare perché non riceve traffico.

Scansione

I crawler scoprono gli URL seguendo i link e leggendo le sitemap, quindi richiedono ogni pagina. Una pagina a cui nessuno fa riferimento, o bloccata in robots.txt, potrebbe non essere mai recuperata. I crawler hanno tempo limitato per sito, quindi server lenti, URL di filtro infiniti e catene di reindirizzamento lo sprecano.

Indicizzazione

Dopo il recupero, il motore analizza l'HTML, determina di cosa tratta la pagina, sceglie una versione canonica tra i duplicati e decide se memorizzarla. Un tag robots noindex o un header X-Robots-Tag, uno stato di errore o un canonico che punta altrove impediscono l'inserimento della pagina nell'indice.

Posizionamento

Quando qualcuno effettua una ricerca, il motore seleziona le pagine indicizzate che corrispondono alla query e le ordina. Rilevanza per la query, qualità e profondità del contenuto, link da altri siti, esperienza della pagina e posizione e dispositivo del ricercatore giocano tutti un ruolo.

Verifica la tua comprensione

Una pagina restituisce uno stato 200, è collegata dal menu e ha un canonico che punta a un URL diverso. A quale fase è più probabile che sia bloccata?

Diagnostica per fase

  • Non scansionata: controlla i link interni, la sitemap e robots.txt.
  • Scansionata ma non indicizzata: controlla codice di stato, noindex, canonico e contenuto duplicato.
  • Indicizzata ma non posizionata: controlla corrispondenza dell'intento, profondità del contenuto, link e concorrenti.

Lezione 1 di 7

Crawling, indicizzazione e ranking