Qual é a diferença entre rastejamento e indexação em SEO

Rastejamento vs. Indexação: Qual é a diferença entre estes 2 processos comuns de mecanismos de busca?

Ao pesquisar pesquisa otimização de motores (SEO), você provavelmente encontrará os termos "rastreamento" e "indexação". Os mecanismos de pesquisa usam algoritmos complexos para calcular as palavras-chave e as posições de que websites posição. Quer seja no Google, Bing ou um mecanismo de busca de nível inferior, no entanto, todos eles dependem de rastejando e indexação.

O que é Crawling?

Também conhecido como spidering, o rastreamento é um processo de mecanismo de pesquisa que envolve a leitura do código de uma página da Web e, subsequentemente, sua conteúdo. Para determinar onde e como uma página da Web deve ser classificada, os mecanismos de pesquisa devem crawl isso. O rastreamento permite aos motores de busca analisar todos os elementos visíveis, assim como os elementos ocultos, tais como meta tags, em uma página web. Usando essas informações, os mecanismos de busca podem determinar rankings de busca apropriados para

Os mecanismos de pesquisa rastreiam as páginas da Web visitando-as com bots. O Google, por exemplo, usa Googlebotenquanto o Bing usa o Bingbot. Normalmente, há duas variações de cada bot de rastreamento: desktop e móvel. A versão para desktop simula um usuário de desktop, enquanto a versão para celular simula um usuário de celular. Independentemente disso, todos os bots de mecanismos de busca são projetados para rastrear páginas da Web.

O que é indexação?

A indexação, por outro lado, envolve a adição de uma página web aos resultados da busca. A indexação vem após o rastejamento. Somente após o Google ou o Bing ter rastreado um site é que eles indexarão o mesmo.

Os motores de busca têm bases de dados maciças e em constante mudança, conhecidas como um índice, que consiste em listagens orgânicas. Quando os mecanismos de busca indexam uma página web, eles criam uma ou mais listagens orgânicas para ela. As listagens orgânicas são adicionadas aos resultados da busca, permitindo que os usuários encontrem a página da web ao pesquisar por palavras-chave relevantes.

Como incentivar os motores de busca a rastrear seu site

Os motores de busca normalmente começarão a rastrear seu website imediatamente após descobri-lo. Assim que o Google e o Bing tomarem conhecimento de seu website, eles visitarão com bots - Googlebot e Bingbot, respectivamente - para ler seu código. A freqüência com que os mecanismos de busca rastejam seu website, no entanto, pode variar.

Você pode notar rastejamento freqüente durante os primeiros meses após o lançamento de seu website, seguido por um declínio acentuado no qual seu website raramente é rastejado. Como o Google e o Bing rastejam seu website com menos freqüência, isso pode resultar em mudanças que passarão despercebidas. Por exemplo, se você modificar uma página da web título na segunda-feira, mas o Google não rasteja a página até sexta-feira, a tag antigo A etiqueta do título permanecerá em vigor por mais quatro dias.

Para incentivar os mecanismos de busca a rastrear seu site com mais freqüência, siga estas dicas:

- Criar um mapa do site e especifique sua localização em seu site no Google Console de Busca e Bing Webmaster Tools.

- Publicar novas páginas web e atualizar regularmente as páginas web existentes.

 - Use um serviço de pingomatic para notificar os motores de busca sobre as mudanças feitas em seu site.

- Construa links internos conectando as páginas de seu site.

- Escolha um serviço confiável de hospedagem web.

- Use uma estrutura URL significativa que descreva o conteúdo de suas páginas web.

- Otimize seu site para carregar rapidamente.

- Localize e corrija erros 404. Quando os mecanismos de pesquisa seguem um link para um erro 404, eles gastam menos tempo rastreando outras páginas da Web em seu site.

- Revise o arquivo robots.txt do seu site para garantir que ele não bloqueie ou restrinja o rastreamento do seu site pelos mecanismos de pesquisa.

Você pode ver a frequência com que os dois principais mecanismos de pesquisa rastreiam seu site usando o Google Search Console e o Bing Webmaster Tools. No caso do Google, faça login na sua conta do Google Search Console e acesse google.com/webmasters/tools/crawl-stats. No caso do Bing, faça login na sua conta do Bing Webmaster Tools e selecione "Crawl Information" (Informações de rastreamento) no menu suspenso "Reports & Data" (Relatórios e dados).

Como incentivar os motores de busca a indexar seu site

Mesmo que o Google e a Bing rastreiem regularmente seu website, eles podem não indexar todas as suas páginas web. Os mecanismos de busca podem rastrear todo o seu website várias vezes por dia, mas apenas indexam três quartos de suas páginas. Qualquer página web omitida do índice do Google ou do Bing não gerará nenhum tráfego orgânico.

Tenha em mente que nem todas as páginas da web se beneficiarão de serem indexadas. As páginas da web com conteúdo duplicado, por exemplo, não precisam ser indexadas. Se duas páginas da web contiverem o mesmo conteúdo, apenas uma delas terá uma posição alta nos resultados da busca. Os mecanismos de busca podem indexar a outra página da web, mas como ela contém conteúdo duplicado, ela será classificada significativamente mais baixa e por muito menos palavras-chave. Com isso, você deve se esforçar para obter a maioria das páginas de seu site, exceto as páginas com conteúdo duplicado, indexadas pelo Google e pelo Bing.

Para incentivar os mecanismos de busca a indexar seu site e todas as suas páginas, siga estas dicas:

- Evite publicar o mesmo conteúdo em várias páginas da web. Cada página da web deve apresentar um conteúdo único que não seja encontrado em outro lugar em seu website.

- Construa backlinks, de preferência de fontes relevantes e confiáveis, para seu website.

- Promova seu website nas mídias sociais. Ao publicar um novo conteúdo em seu website, compartilhe um link para ele com seus amigos e familiares. Facebook e seguidores no Twitter.

- Criar e utilizar um mapa do site. Um mapa do site incentiva os mecanismos de busca a rastrear e indexar seu site.

- Tente evitar mudar a localização das páginas web. Se você precisar mover uma página da web para um local diferente, o que significa que ela terá uma URL diferente, use um 301 redirecionar.

Você pode ver quais páginas de seu site Google e Bing indexaram usando o operador de busca "site". Basta pesquisar as páginas de seu site domínio procedido por "site:" O operador do site diz ao Google e ao Bing para filtrar todas as listagens, exceto aquelas do domínio especificado, dos resultados da busca. Supondo que você não inclua nenhuma outra palavra em sua busca, o operador do "site" revelará todas as páginas web em seu site que o Google e o Bing indexaram.

A otimização para mecanismos de busca (SEO) requer um entendimento de como os mecanismos de busca operam. Se você não sabe como o Google ou o Bing funcionam, você terá dificuldades para otimizar seu site para os resultados de busca deles. O rastreamento ocorre quando os mecanismos de busca visitam uma página da web para ler seu código e analisar o código. Em comparação, a indexação ocorre quando os mecanismos de busca adicionam uma página web aos seus resultados de busca.