У чому різниця між скануванням та індексацією в SEO

Сканування проти індексації: У чому різниця між цими двома поширеними процесами в пошукових системах?

При дослідженні пошук оптимізація двигуна (SEO), ви, ймовірно, зустрінетеся з термінами "сканування" та "індексація". Пошукові системи використовують складні алгоритми для обчислення ключових слів і позицій для який веб-сайти ранг. Чи то Google, Bing або пошукової системи нижчого рівня, однак, всі вони покладаються на сканування і індексація.

Що таке повзання?

Також званий "павутинним скануванням", сканування - це процес роботи пошукової системи, який включає в себе читання коду веб-сторінки і, згодом, її зміст. Щоб визначити, де і як має ранжуватися веб-сторінка, пошукові системи повинні повзати це. Сканування дозволяє пошуковим системам аналізувати всі видимі елементи, а також приховані елементи, такі як мета на веб-сторінці. Використовуючи цю інформацію, пошукові системи можуть визначити відповідні пошукові рейтинги для

Пошукові системи сканують веб-сторінки, відвідуючи їх за допомогою боти. Google, наприклад, використовує Googlebot, тоді як Bing використовує Bingbot. Зазвичай існує дві варіації кожного скануючого бота: десктопна та мобільна. Десктопна версія імітує користувача комп'ютера, тоді як мобільна версія імітує мобільного користувача. Незалежно від цього, всі пошукові боти призначені для сканування веб-сторінок.

Що таке індексація?

Індексація, з іншого боку, передбачає додавання веб-сторінки до результатів пошуку. Індексація відбувається після сканування. Тільки після того, як Google або Bing просканують веб-сайт, вони його індексують.

Пошукові системи мають величезні бази даних, що постійно змінюються, відомі як індекс, які складаються з органічних списків. Коли пошукові системи індексують веб-сторінку, вони створюють для неї один або декілька органічних списків. Органічні списки додаються до результатів пошуку, що дозволяє користувачам знаходити веб-сторінки при пошуку за відповідними ключовими словами.

Як заохотити пошукові системи до сканування сайту

Пошукові системи, як правило, починають сканувати ваш веб-сайт відразу після його виявлення. Як тільки Google і Bing дізнаються про ваш веб-сайт, вони відвідають його за допомогою ботів - Googlebot і Bingbot відповідно - для читання його коду. Однак частота, з якою пошукові системи сканують ваш веб-сайт, може коливатися.

Ви можете помітити часте сканування протягом перших кількох місяців після запуску вашого веб-сайту, а потім різкий спад, коли ваш веб-сайт сканується рідко. Оскільки Google і Bing сканують ваш веб-сайт рідше, це може призвести до того, що зміни залишаться непоміченими. Наприклад, якщо ви змінюєте назва в понеділок, але Google не сканує сторінку до п'ятниці, тег старий заголовок буде діяти ще чотири дні.

Щоб заохотити пошукові системи частіше сканувати ваш сайт, дотримуйтесь цих порад:

- Створіть карта сайту і вкажіть його розташування на вашому сайті в Google Консоль пошуку та Bing Webmaster Tools.

- Регулярно публікувати нові та оновлювати існуючі веб-сторінки.

 - Використовуйте пінг-сервіс, наприклад, pingomatic, щоб повідомляти пошуковим системам про зміни, внесені на вашому сайті.

- Побудова внутрішні посилання підключення сторінок вашого сайту.

- Обирайте надійний хостинг.

- Використовуйте змістовну структуру URL-адреси, яка описує зміст ваших веб-сторінок.

- Оптимізуйте свій сайт для швидкого завантаження.

- Знайти і виправити 404 помилки. Коли пошукові системи переходять за посиланням на помилку 404, вони витрачають менше часу на сканування інших веб-сторінок вашого веб-сайту.

-   Огляд вашого веб-сайту роботи.txt, щоб переконатися, що він не блокує або іншим чином не обмежує пошуковим системам сканування вашого веб-сайту.

Ви можете переглянути частоту сканування вашого сайту двома основними пошуковими системами за допомогою Пошукова консоль Google та Bing Webmaster Tools. Для Google, журнал Увійдіть до свого облікового запису Google Search Console та відвідайте сторінку google.com/webmasters/tools/crawl-stats. Для Bing увійдіть до свого облікового запису Bing Webmaster Tools і виберіть "Crawl Information" у випадаючому меню "Reports & Data".

Як заохотити пошукові системи індексувати ваш сайт

Навіть якщо Google і Bing регулярно сканують ваш веб-сайт, вони можуть не проіндексувати всі його веб-сторінки. Пошукові системи можуть сканувати весь веб-сайт кілька разів на день, але індексувати лише три чверті його сторінок. Будь-які веб-сторінки, не проіндексовані Google або Bing, не будуть генерувати ніякого органічного трафіку.

Майте на увазі, що не всі веб-сторінки виграють від індексації. Наприклад, не потрібно індексувати веб-сторінки з дублюючим контентом. Якщо дві веб-сторінки містять однаковий контент, лише одна з них займе високі позиції в результатах пошуку. Пошукові системи можуть проіндексувати іншу веб-сторінку, але через те, що вона містить дублікат контенту, вона буде ранжуватися значно нижче і за набагато меншою кількістю ключових слів. З огляду на це, слід прагнути до того, щоб більшість сторінок вашого веб-сайту, за винятком сторінок з дублюючим контентом, були проіндексовані Google та Bing.

Щоб заохотити пошукові системи індексувати ваш сайт і всі його сторінки, дотримуйтесь цих порад:

- Уникайте публікації одного і того ж контенту на декількох веб-сторінках. Кожна веб-сторінка повинна містити унікальний контент, який не зустрічається більше ніде на вашому веб-сайті.

- Створюйте зворотні посилання, бажано з релевантних та авторитетних джерел, на свій сайт.

- Просувайте свій веб-сайт у соціальних мережах. Коли ви публікуєте новий контент на своєму веб-сайті, діліться посиланням на нього зі своїми підписниками у Facebook та Twitter.

- Створіть і використовуйте карту сайту. Карта сайту заохочує пошукові системи як сканувати, так і індексувати ваш веб-сайт.

- Намагайтеся уникати зміни розташування веб-сторінок. Якщо вам необхідно перемістити веб-сторінку в інше місце, тобто вона буде мати іншу URL-адресу, використовуйте 301 перенаправлення.

Ви можете побачити, які веб-сторінки вашого сайту проіндексували Google та Bing, використовуючи пошуковий оператор "site". Просто виконайте пошук за адресою вашого сайту домен далі "site:" Оператор сайту вказує Google і Bing відфільтрувати з результатів пошуку всі списки, крім тих, що належать до вказаного домену. Припускаючи, що ви не включаєте жодних інших слів у свій пошук, оператор "site" покаже всі веб-сторінки вашого веб-сайту, які були проіндексовані Google та Bing.

Пошукова оптимізація (SEO) вимагає розуміння того, як працюють пошукові системи. Якщо ви не знаєте, як працює Google або Bing, вам буде важко оптимізувати свій веб-сайт для їхніх пошукових результатів. Сканування відбувається, коли пошукові системи відвідують веб-сторінку, щоб прочитати її код та проаналізувати код. Для порівняння, індексація відбувається, коли пошукові системи додають веб-сторінку до результатів пошуку.