Qual é a diferença entre rastejamento e indexação em SEO

Rastejamento vs. Indexação: Qual é a diferença entre estes 2 processos comuns de mecanismos de busca?

Ao pesquisar pesquisa otimização de motores (SEO), you’ll probably encounter the terms “crawling” and “indexing.” Search engines use complex algorithms to calculate the keywords and positions for que websites posição. Quer seja no Google, Bing ou um motor de busca de nível inferior, no entanto, todos eles dependem de rastejamento e indexação.

O que é Crawling?

Also referred to as spidering, crawling is a search engine process that involves reading a web page’s code and, subsequently, its conteúdo. To determine where and how a web page should rank, search engines must crawl isso. O rastreamento permite aos motores de busca analisar todos os elementos visíveis, assim como os elementos ocultos, tais como meta tags, em uma página web. Usando essas informações, os mecanismos de busca podem determinar rankings de busca apropriados para

Os mecanismos de pesquisa rastreiam as páginas da Web visitando-as com bots. O Google, por exemplo, usa o Googlebot, enquanto o Bing usa o Bingbot. Normalmente, há duas variações de cada bot de rastreamento: desktop e móvel. A versão para desktop simula um usuário de desktop, enquanto a versão para celular simula um usuário de celular. Independentemente disso, todos os bots de mecanismos de busca são projetados para rastrear páginas da Web.

O que é indexação?

A indexação, por outro lado, envolve a adição de uma página web aos resultados da busca. A indexação vem após o rastejamento. Somente após o Google ou o Bing ter rastreado um site é que eles indexarão o mesmo.

Os motores de busca têm bases de dados maciças e em constante mudança, conhecidas como um índice, que consiste em listagens orgânicas. Quando os mecanismos de busca indexam uma página web, eles criam uma ou mais listagens orgânicas para ela. As listagens orgânicas são adicionadas aos resultados da busca, permitindo que os usuários encontrem a página da web ao pesquisar por palavras-chave relevantes.

Como incentivar os motores de busca a rastrear seu site

Os motores de busca normalmente começarão a rastrear seu website imediatamente após descobri-lo. Assim que o Google e o Bing tomarem conhecimento de seu website, eles visitarão com bots - Googlebot e Bingbot, respectivamente - para ler seu código. A freqüência com que os mecanismos de busca rastejam seu website, no entanto, pode variar.

Você pode notar rastejamento freqüente durante os primeiros meses após o lançamento de seu website, seguido por um declínio acentuado no qual seu website raramente é rastejado. Como o Google e o Bing rastejam seu website com menos freqüência, isso pode resultar em mudanças que passarão despercebidas. Por exemplo, se você modificar uma página da web título na segunda-feira, mas o Google não rasteja a página até sexta-feira, a tag antigo A etiqueta do título permanecerá em vigor por mais quatro dias.

Para incentivar os mecanismos de busca a rastrear seu site com mais freqüência, siga estas dicas:

- Criar um mapa do site e especifique sua localização em seu site no Google Console de Busca e Bing Webmaster Tools.

- Publicar novas páginas web e atualizar regularmente as páginas web existentes.

 - Use um serviço de pingomatic para notificar os motores de busca sobre as mudanças feitas em seu site.

- Construir links internos conectando as páginas de seu site.

- Escolha um serviço confiável de hospedagem web.

- Use uma estrutura URL significativa que descreva o conteúdo de suas páginas web.

- Otimize seu site para carregar rapidamente.

- Encontrar e consertar 404 erros. Quando os mecanismos de busca seguem um link para um erro 404, eles gastarão menos tempo rastejando outras páginas da web em seu site.

-•   Revisão de seu website robôs.txt para garantir que ele não bloqueie ou restrinja de alguma forma os mecanismos de busca de rastrear seu site.

Você pode ver a frequência com que os dois principais mecanismos de pesquisa rastreiam seu site usando Console de Busca do Google e Bing Webmaster Tools. Para o Google, log em sua conta no Console de Busca do Google e visite google.com/webmasters/tools/crawl-stats. Para Bing, faça o login em sua conta Bing Webmaster Tools e selecione "Crawl Information" sob o menu suspenso "Reports & Data".

Como incentivar os motores de busca a indexar seu site

Mesmo que o Google e a Bing rastreiem regularmente seu website, eles podem não indexar todas as suas páginas web. Os mecanismos de busca podem rastrear todo o seu website várias vezes por dia, mas apenas indexam três quartos de suas páginas. Qualquer página web omitida do índice do Google ou do Bing não gerará nenhum tráfego orgânico.

Tenha em mente que nem todas as páginas da web se beneficiarão de serem indexadas. As páginas da web com conteúdo duplicado, por exemplo, não precisam ser indexadas. Se duas páginas da web contiverem o mesmo conteúdo, apenas uma delas terá uma posição alta nos resultados da busca. Os mecanismos de busca podem indexar a outra página da web, mas como ela contém conteúdo duplicado, ela será classificada significativamente mais baixa e por muito menos palavras-chave. Com isso, você deve se esforçar para obter a maioria das páginas de seu site, exceto as páginas com conteúdo duplicado, indexadas pelo Google e pelo Bing.

Para incentivar os mecanismos de busca a indexar seu site e todas as suas páginas, siga estas dicas:

- Evite publicar o mesmo conteúdo em várias páginas da web. Cada página da web deve apresentar um conteúdo único que não seja encontrado em outro lugar em seu website.

- Construa backlinks, de preferência de fontes relevantes e confiáveis, para seu website.

- Promova seu site nas mídias sociais. Quando você publicar novos conteúdos em seu website, compartilhe um link para ele com seus seguidores no Facebook e no Twitter.

- Criar e utilizar um mapa do site. Um mapa do site incentiva os mecanismos de busca a rastrear e indexar seu site.

- Tente evitar mudar a localização das páginas web. Se você precisar mover uma página da web para um local diferente, o que significa que ela terá uma URL diferente, use um 301 redirecionar.

Você pode ver quais páginas de seu site Google e Bing indexaram usando o operador de busca "site". Basta pesquisar as páginas de seu site domínio procedido por "site:" O operador do site diz ao Google e ao Bing para filtrar todas as listagens, exceto aquelas do domínio especificado, dos resultados da busca. Supondo que você não inclua nenhuma outra palavra em sua busca, o operador do "site" revelará todas as páginas web em seu site que o Google e o Bing indexaram.

A otimização para mecanismos de busca (SEO) requer um entendimento de como os mecanismos de busca operam. Se você não sabe como o Google ou o Bing funcionam, você terá dificuldades para otimizar seu site para os resultados de busca deles. O rastreamento ocorre quando os mecanismos de busca visitam uma página da web para ler seu código e analisar o código. Em comparação, a indexação ocorre quando os mecanismos de busca adicionam uma página web aos seus resultados de busca.