В чем разница между ползанием и индексированием в SEO

Ползание и индексирование: В чем разница между этими двумя общими процессами поисковых систем?

При исследовании поиск оптимизация двигателя (SEO), вы наверняка сталкивались с терминами "ползание" и "индексирование". Поисковые системы используют сложные алгоритмы для расчета ключевых слов и позиций для который сайты рейтинг. Будь то Google, Bing Или поисковая система более низкого уровня, однако все они полагаются на ползание и индексирование.

Что такое ползание?

Also referred to as spidering, crawling is a search engine process that involves reading a web page’s code and, subsequently, its содержание. Чтобы определить, где и как должна ранжироваться веб-страница, поисковые системы должны ползти это. Ползание позволяет поисковым системам анализировать все видимые элементы, а также скрытые элементы, такие как meta теги на веб-странице. Используя эту информацию, поисковые системы могут определять соответствующие рейтинги поиска для

Поисковые системы просматривают веб-страницы, посещая их с помощью боты. Google, for example, uses Googlebot, whereas Bing uses Bingbot. There are typically two variations of each crawling bot: desktop and mobile. The desktop version of simulates a desktop user, whereas the mobile version simulates a mobile user. Regardless, all search engine bots are designed to crawl web pages.

Что такое индексирование?

Индексирование, с другой стороны, подразумевает добавление веб-страницы в результаты поиска. Индексирование происходит после сканирования. Только после того, как Google или Bing просмотрят веб-сайт, они его проиндексируют.

Поисковые системы имеют массивные и постоянно меняющиеся базы данных, известные как индекс, который состоит из органических объявлений. Когда поисковые системы индексируют веб-страницу, они создают для нее один или несколько органических объявлений. Органические объявления добавляются в результаты поиска, что позволяет пользователям найти веб-страницу при поиске по соответствующим ключевым словам.

Как побудить поисковые системы переползти на ваш сайт

Как правило, поисковые системы начинают просматривать ваш сайт сразу после его обнаружения. Как только Google и Bing узнают о вашем сайте, они посетят его с ботами - Googlebot и Bingbot соответственно - чтобы прочитать его код. Однако частота, с которой поисковые системы просматривают ваш сайт, может меняться.

В первые несколько месяцев после запуска сайта вы можете заметить частое посещение сайта, а затем наступит резкий спад, когда ваш сайт будет посещаться редко. Поскольку Google и Bing реже просматривают ваш сайт, это может привести к тому, что изменения останутся незамеченными. Например, если вы измените веб-страницу. название тег в понедельник, но Google не просматривает страницу до пятницы, то старый тег заголовка будет действовать еще четыре дня.

Чтобы побудить поисковые системы чаще просматривать ваш сайт, следуйте следующим советам:

- Создать карта сайта и укажите его местоположение на вашем сайте в Google Консоль поиска и Bing Webmaster Tools.

- Регулярно публикуйте новые и обновляйте существующие веб-страницы.

 - Используйте пинг-сервис, например pingomatic, чтобы уведомлять поисковые системы об изменениях на вашем сайте.

•   Build internal links connecting your website’s pages.

- Выберите надежный хостинг.

- Используйте осмысленную структуру URL, которая описывает содержание ваших веб-страниц.

- Оптимизируйте свой сайт для быстрой загрузки.

•   Find and fix 404 errors. When search engines follow a link to a 404 error, they’ll spend less time crawling other web pages on your website.

•   Review your website’s robots.txt file to ensure it doesn’t block or otherwise restrict search engines from crawling your website.

You can view the frequency at which the two major search engines crawl your website by using Google Search Console and Bing Webmaster Tools. For Google, log in to your Google Search Console account and visit google.com/webmasters/tools/crawl-stats. For Bing, log in your Bing Webmaster Tools account and select “Crawl Information” under the “Reports & Data” drop-down menu.

Как побудить поисковые системы проиндексировать ваш сайт

Даже если Google и Bing регулярно просматривают ваш сайт, они могут проиндексировать не все его веб-страницы. Поисковые системы могут просматривать весь ваш сайт несколько раз в день, но индексировать только три четверти его страниц. Любые веб-страницы, пропущенные из индекса Google или Bing, не будут генерировать органический трафик.

Имейте в виду, что не все веб-страницы выиграют от индексации. Например, веб-страницы с дублированным контентом не нужно индексировать. Если две веб-страницы содержат одинаковый контент, только одна из них будет занимать высокие позиции в результатах поиска. Поисковые системы могут проиндексировать вторую веб-страницу, но поскольку она содержит дублированный контент, она будет ранжироваться значительно ниже и по гораздо меньшему количеству ключевых слов. Учитывая это, вы должны стремиться к тому, чтобы большинство страниц вашего сайта, за исключением страниц с дублированным содержанием, индексировались Google и Bing.

Чтобы побудить поисковые системы проиндексировать ваш сайт и все его страницы, следуйте следующим советам:

- Избегайте публикации одного и того же содержания на нескольких веб-страницах. На каждой веб-странице должен быть уникальный контент, которого нет нигде на вашем сайте.

- Создавайте обратные ссылки на свой сайт, предпочтительно из релевантных и авторитетных источников.

•   Promote your website on social media. When you publish new content on your website, share a link to it with your Facebook и подписчиков в Twitter.

- Создайте и используйте карту сайта. Карта сайта поощряет поисковые системы к просмотру и индексированию вашего сайта.

- Старайтесь не менять местоположение веб-страниц. Если вам необходимо переместить веб-страницу в другое место, то есть она будет иметь другой URL-адрес, используйте команду 301 перенаправить.

Вы можете узнать, какие веб-страницы вашего сайта проиндексировали Google и Bing, используя оператор поиска "сайт". Просто наберите в поисковой строке вашего сайта домен Оператор "site:" указывает Google и Bing отфильтровать в результатах поиска все объявления, кроме тех, которые относятся к указанному домену. Если вы не включите в поиск никаких других слов, оператор "site" покажет все веб-страницы вашего сайта, которые Google и Bing проиндексировали.

Поисковая оптимизация (SEO) требует понимания того, как работают поисковые системы. Если вы не знаете, как работают Google или Bing, вам будет трудно оптимизировать свой сайт для их результатов поиска. Ползание происходит, когда поисковые системы посещают веб-страницу, чтобы прочитать ее код и проанализировать его. Для сравнения, индексирование происходит, когда поисковые системы добавляют веб-страницу в результаты поиска.