Qual è la differenza tra crawling e indicizzazione nel SEO

Crawling vs. indicizzazione: Qual è la differenza tra questi due processi comuni dei motori di ricerca?

Quando la ricerca cerca ottimizzazione dei motori (SEO), probabilmente incontrerete i termini "crawling" e "indicizzazione". I motori di ricerca utilizzano algoritmi complessi per calcolare le parole chiave e le posizioni per i siti web. che siti web rango. Che si tratti di Google, Bing o di un motore di ricerca di livello inferiore, tuttavia, tutti si basano su strisciando e indicizzazione.

Cos'è strisciare?

Chiamato anche spidering, il crawling è un processo dei motori di ricerca che prevede la lettura del codice di una pagina web e, di conseguenza, del suo contenuto. contenuto. Per determinare dove e come una pagina web dovrebbe posizionarsi, i motori di ricerca devono strisciare it. Il crawling consente ai motori di ricerca di analizzare tutti gli elementi visibili, nonché quelli nascosti, come ad esempio meta tag, su una pagina web. Grazie a queste informazioni, i motori di ricerca sono in grado di determinare le posizioni di ricerca appropriate per

I motori di ricerca effettuano il crawling delle pagine web visitandole con bot. Google, ad esempio, utilizza Googlebot, mentre Bing utilizza Bingbot. In genere esistono due varianti di ciascun bot di crawling: desktop e mobile. La versione desktop di Bingbot simula un utente desktop, mentre la versione mobile simula un utente mobile. In ogni caso, tutti i bot dei motori di ricerca sono progettati per effettuare il crawling delle pagine web.

Cos'è l'indicizzazione?

L'indicizzazione, d'altra parte, comporta l'aggiunta di una pagina web ai risultati di ricerca. L'indicizzazione viene dopo il crawling. Solo dopo che Google o Bing hanno scansionato un sito web, lo indicizzano.

I motori di ricerca hanno database massicci e in continua evoluzione, noti come indice, che consiste in elenchi organici. Quando i motori di ricerca indicizzano una pagina web, creano uno o più elenchi organici per essa. Gli elenchi organici vengono aggiunti ai risultati di ricerca, permettendo agli utenti di trovare la pagina web quando cercano parole chiave pertinenti.

Come incoraggiare i motori di ricerca a scansionare il tuo sito web

In genere, i motori di ricerca iniziano a effettuare il crawling del vostro sito web subito dopo averlo scoperto. Una volta che Google e Bing vengono a conoscenza del vostro sito web, lo visitano con i bot - rispettivamente Googlebot e Bingbot - per leggerne il codice. La frequenza con cui i motori di ricerca effettuano il crawling del vostro sito web, tuttavia, può variare.

Nei primi mesi dopo il lancio del vostro sito web, potreste notare un crawling frequente, seguito da un forte declino in cui il vostro sito web viene crawlato raramente. La minore frequenza con cui Google e Bing effettuano il crawling del vostro sito web può far sì che le modifiche passino inosservate. Ad esempio, se modificate la pagina web di una titolo lunedì, ma Google non effettua il crawling della pagina fino a venerdì, il tag vecchio title tag rimarrà in vigore per altri quattro giorni.

Per incoraggiare i motori di ricerca a scansionare il tuo sito web più frequentemente, segui questi consigli:

- Creare un mappa del sito e specificare la sua posizione sul tuo sito web in Google Console di ricerca e Bing Webmaster Tools.

- Pubblicare nuove pagine web e aggiornare regolarmente quelle esistenti.

 - Utilizzate un servizio di pinging come pingomatic per notificare ai motori di ricerca le modifiche apportate al vostro sito web.

- Creare collegamenti interni tra le pagine del sito.

- Scegliete un servizio di web hosting affidabile.

- Utilizzate una struttura URL significativa che descriva il contenuto delle vostre pagine web.

- Ottimizzate il vostro sito web per caricarlo rapidamente.

- Individuare e correggere gli errori 404. Quando i motori di ricerca seguono un link a un errore 404, passano meno tempo a scansionare altre pagine web del vostro sito.

- Esaminate il file robots.txt del vostro sito web per assicurarvi che non blocchi o limiti in altro modo il crawling del vostro sito da parte dei motori di ricerca.

È possibile visualizzare la frequenza con cui i due principali motori di ricerca effettuano il crawling del vostro sito web utilizzando Google Search Console e Bing Webmaster Tools. Per Google, accedete al vostro account Google Search Console e visitate google.com/webmasters/tools/crawl-stats. Per Bing, accedete al vostro account Bing Webmaster Tools e selezionate "Crawl Information" nel menu a discesa "Reports & Data".

Come incoraggiare i motori di ricerca a indicizzare il tuo sito web

Anche se Google e Bing effettuano regolarmente il crawling del vostro sito web, potrebbero non indicizzare tutte le sue pagine. I motori di ricerca potrebbero scansionare l'intero sito web più volte al giorno, ma indicizzare solo tre quarti delle pagine. Le pagine web omesse dall'indice di Google o Bing non genereranno alcun traffico organico.

Tenete presente che non tutte le pagine web trarranno beneficio dall'indicizzazione. Le pagine web con contenuti duplicati, ad esempio, non hanno bisogno di essere indicizzate. Se due pagine web contengono lo stesso contenuto, solo una di esse si posizionerà in alto nei risultati di ricerca. I motori di ricerca possono indicizzare l'altra pagina web, ma poiché contiene contenuti duplicati, si posizionerà molto più in basso e per un numero di parole chiave molto inferiore. Per questo motivo, dovreste cercare di far indicizzare a Google e Bing la maggior parte delle pagine del vostro sito web, ad eccezione di quelle con contenuti duplicati.

Per incoraggiare i motori di ricerca a indicizzare il tuo sito web e tutte le sue pagine, segui questi consigli:

- Evitate di pubblicare gli stessi contenuti su più pagine web. Ogni pagina web deve presentare contenuti unici che non si trovano altrove sul vostro sito.

- Creare backlink, preferibilmente da fonti rilevanti e autorevoli, verso il vostro sito web.

- Promuovete il vostro sito web sui social media. Quando pubblicate nuovi contenuti sul vostro sito web, condividetene il link con i vostri amici. Facebook e i follower di Twitter.

- Creare e utilizzare una mappa del sito. Una mappa del sito incoraggia i motori di ricerca a scansionare e indicizzare il vostro sito web.

- Cercate di evitare di cambiare la posizione delle pagine web. Se si deve spostare una pagina web in un'altra posizione, cioè con un URL diverso, si deve utilizzare un'opzione 301 reindirizzare.

È possibile vedere quali pagine web del vostro sito sono state indicizzate da Google e Bing utilizzando l'operatore di ricerca "site". Basta cercare il nome del vostro sito web dominio L'operatore "site" indica a Google e Bing di filtrare dai risultati della ricerca tutti gli annunci tranne quelli del dominio specificato. Supponendo di non includere altre parole nella ricerca, l'operatore "site" rivelerà tutte le pagine web del vostro sito che Google e Bing hanno indicizzato.

L'ottimizzazione per i motori di ricerca (SEO) richiede la comprensione del funzionamento dei motori di ricerca. Se non sapete come funzionano Google o Bing, farete fatica a ottimizzare il vostro sito web per i loro risultati di ricerca. Il crawling avviene quando i motori di ricerca visitano una pagina web per leggerne il codice e analizzarlo. L'indicizzazione, invece, avviene quando i motori di ricerca aggiungono una pagina web ai loro risultati di ricerca.