Vad är skillnaden mellan crawling och indexering i SEO?

Krypning vs. indexering: Vad är skillnaden mellan dessa två vanliga sökmotorprocesser?

När du undersöker Sök på motoroptimering (SEO), kommer du förmodligen att stöta på termerna "crawling" och "indexering". Sökmotorer använder komplexa algoritmer för att beräkna nyckelord och positioner för som webbplatser rangordning. Oavsett om det är Google, Bing eller en lägre rankad sökmotor, men de är alla beroende av att de kryper och indexering.

Vad är krypning?

Crawling, även kallat spidering, är en sökmotorprocess som innebär att man läser en webbsidas kod och därefter dess innehåll. För att avgöra var och hur en webbsida ska rankas måste sökmotorerna krypa den. Genom att krypa kan sökmotorerna analysera alla synliga element, liksom dolda element, t.ex. meta taggar, på en webbsida. Med hjälp av denna information kan sökmotorerna fastställa lämpliga sökplaceringar för

Sökmotorer genomsöker webbsidor genom att besöka dem med robotar. Google använder t.ex. Googlebot, medan Bing använder Bingbot. Det finns vanligtvis två varianter av varje crawlingbot: desktop och mobile. Desktop-versionen av simulerar en desktop-användare, medan mobilversionen simulerar en mobilanvändare. Oavsett vilket är alla sökmotorrobotar utformade för att genomsöka webbsidor.

Vad är indexering?

Indexering innebär däremot att en webbsida läggs till i sökresultaten. Indexering kommer efter crawling. Det är först när Google eller Bing har kryssat en webbplats som de indexerar den.

Sökmotorerna har stora och ständigt föränderliga databaser, så kallade index, som består av organiska listor. När sökmotorerna indexerar en webbsida skapar de en eller flera organiska listor för den. De organiska listorna läggs till i sökresultaten så att användarna kan hitta webbsidan när de söker efter relevanta nyckelord.

Hur du uppmuntrar sökmotorerna att söka igenom din webbplats

Sökmotorerna börjar vanligtvis söka igenom din webbplats omedelbart efter att de upptäckt den. När Google och Bing får kännedom om din webbplats kommer de att besöka den med robotar - Googlebot respektive Bingbot - för att läsa dess kod. Frekvensen med vilken sökmotorerna kryper din webbplats kan dock variera.

Du kan märka att din webbplats kryssas ofta under de första månaderna efter att du har startat den, följt av en brant nedgång då din webbplats sällan kryssas. När Google och Bing kryssar din webbplats mindre ofta kan det leda till att förändringar går obemärkta förbi. Om du till exempel ändrar en webbsidas titel taggen på måndag, men Google går inte igenom sidan förrän på fredag, är det gamla kommer att fortsätta att gälla i ytterligare fyra dagar.

Följ de här tipsen för att uppmuntra sökmotorerna att söka igenom din webbplats oftare:

- Skapa en Webbplatskarta och ange var den finns på din webbplats i Google Sök konsolen och Bing Webmaster Tools.

- Publicera nya webbsidor och uppdatera befintliga webbsidor regelbundet.

 - Använd en pingingtjänst som pingomatic för att meddela sökmotorerna om ändringar på din webbplats.

- Bygga upp interna länkar kopplar ihop sidorna på din webbplats.

- Välj ett pålitligt webbhotell.

- Använd en meningsfull URL-struktur som beskriver innehållet på dina webbsidor.

- Optimera din webbplats så att den laddas snabbt.

- Hitta och åtgärda 404 fel. När sökmotorerna följer en länk till ett 404-fel kommer de att ägna mindre tid åt att söka efter andra webbsidor på din webbplats.

-   Översyn av din webbplats robotar.txt-filen för att se till att den inte blockerar eller på annat sätt hindrar sökmotorer från att söka på din webbplats.

Du kan se hur ofta de två största sökmotorerna söker igenom din webbplats genom att använda Google Search Console och Bing Webmaster Tools. För Google, logg till ditt Google Search Console-konto och gå till google.com/webmasters/tools/crawl-stats. För Bing loggar du in på ditt konto för Bing Webmaster Tools och väljer "Crawl Information" under rullgardinsmenyn "Reports & Data".

Hur du uppmuntrar sökmotorerna att indexera din webbplats

Även om Google och Bing regelbundet går igenom din webbplats kan det hända att de inte indexerar alla webbsidor. Sökmotorerna kan gå igenom hela din webbplats flera gånger per dag men bara indexera tre fjärdedelar av sidorna. Alla webbsidor som inte finns med i Googles eller Bings index kommer inte att generera någon organisk trafik.

Tänk på att det inte är alla webbsidor som gynnas av att indexeras. Webbsidor med dubbelt innehåll behöver till exempel inte indexeras. Om två webbsidor innehåller samma innehåll kommer endast en av dem att rankas högt i sökresultaten. Sökmotorerna kan indexera den andra webbsidan, men eftersom den innehåller dubbelt innehåll kommer den att rankas betydligt lägre och för betydligt färre sökord. Med detta sagt bör du sträva efter att få de flesta av din webbplats sidor, med undantag för sidor med dubbelt innehåll, indexerade av Google och Bing.

Följ de här tipsen för att uppmuntra sökmotorerna att indexera din webbplats och alla dess sidor:

- Undvik att publicera samma innehåll på flera webbsidor. Varje webbsida bör innehålla unikt innehåll som inte finns någon annanstans på din webbplats.

- Bygg upp backlinks, helst från relevanta och auktoritativa källor, till din webbplats.

- Främja din webbplats på sociala medier. När du publicerar nytt innehåll på din webbplats kan du dela en länk till det med dina följare på Facebook och Twitter.

- Skapa och använd en webbplatskarta. En sitemap uppmuntrar sökmotorerna att både gå igenom och indexera din webbplats.

- Försök att undvika att byta plats för webbsidor. Om du måste flytta en webbsida till en annan plats, vilket innebär att den kommer att ha en annan URL, använd en 301 omdirigera.

Du kan se vilka webbsidor på din webbplats som Google och Bing har indexerat genom att använda sökoperatorn "site". Sök bara efter din webbplats domän fortsätter med "site:" Webbplatsoperatören talar om för Google och Bing att filtrera alla listor utom de från den angivna domänen från sökresultaten. Om du inte inkluderar några andra ord i din sökning kommer operatören "site" att visa alla webbsidor på din webbplats som Google och Bing har indexerat.

Sökmotoroptimering (SEO) kräver förståelse för hur sökmotorer fungerar. Om du inte vet hur Google eller Bing fungerar kommer du att ha svårt att optimera din webbplats för deras sökresultat. Crawling sker när sökmotorer besöker en webbsida för att läsa dess kod och analysera koden. Indexering sker däremot när sökmotorerna lägger till en webbsida i sina sökresultat.