Wat is het verschil tussen crawling en indexering bij SEO

Crawlen vs. Indexeren: Wat is het Verschil Tussen Deze 2 Gemeenschappelijke Zoekmachine Processen?

Bij het onderzoek naar zoeken motoroptimalisatie (SEO), zult u waarschijnlijk de termen "crawling" en "indexering" tegenkomen. Zoekmachines gebruiken complexe algoritmen om de sleutelwoorden en posities voor die websites rang. Of het nu Google is, Bing of een lagere zoekmachine, maar ze vertrouwen allemaal op crawling en indexering.

Wat is kruipen?

Crawlen wordt ook wel spideren genoemd en is een zoekmachineproces waarbij de code van een webpagina wordt gelezen en vervolgens de code van de webpagina. inhoud. Om te bepalen waar en hoe een webpagina moet worden gerangschikt, moeten zoekmachines kruipen het. Via crawling kunnen zoekmachines alle zichtbare elementen analyseren, maar ook verborgen elementen, zoals meta tags, op een webpagina. Met behulp van deze informatie kunnen zoekmachines de juiste zoekrangorde bepalen voor

Zoekmachines crawlen webpagina's door ze te bezoeken met bots. Google gebruikt bijvoorbeeld Googlebot, terwijl Bing Bingbot gebruikt. Er zijn meestal twee varianten van elke crawlbot: desktop en mobiel. De desktopversie simuleert een desktopgebruiker, terwijl de mobiele versie een mobiele gebruiker simuleert. Hoe dan ook, alle zoekmachine bots zijn ontworpen om webpagina's te crawlen.

Wat is indexeren?

Indexeren daarentegen houdt in dat een webpagina aan de zoekresultaten wordt toegevoegd. Indexeren komt na crawlen. Pas nadat Google of Bing een website hebben gecrawld, zullen zij deze indexeren.

Zoekmachines hebben enorme en steeds veranderende databases, bekend als een index, die bestaat uit organische vermeldingen. Wanneer zoekmachines een webpagina indexeren, maken ze er één of meer organische vermeldingen voor aan. De organische vermeldingen worden toegevoegd aan de zoekresultaten, zodat gebruikers de webpagina kunnen vinden wanneer zij zoeken op relevante trefwoorden.

Hoe stimuleer je zoekmachines om je website te crawlen

Zoekmachines beginnen uw website doorgaans meteen te crawlen nadat ze hem hebben ontdekt. Zodra Google en Bing zich bewust worden van uw website, zullen ze langskomen met bots - respectievelijk Googlebot en Bingbot - om de code te lezen. De frequentie waarmee zoekmachines uw website crawlen, kan echter fluctueren.

De eerste maanden na de lancering van uw website kunt u merken dat uw website vaak wordt gecrawld, gevolgd door een sterke daling waarbij uw website zelden wordt gecrawld. Als Google en Bing uw website minder vaak crawlen, kan dit ertoe leiden dat wijzigingen onopgemerkt blijven. Als u bijvoorbeeld de inhoud van een webpagina wijzigt titel tag op maandag, maar Google crawlt de pagina pas op vrijdag, de oud title tag blijft nog vier dagen van kracht.

Om zoekmachines aan te moedigen uw website vaker te crawlen, volgt u deze tips:

- Maak een sitemap en geef de locatie ervan op uw website in Google Zoek Console en Bing Webmaster Tools.

- Publiceer nieuwe webpagina's en werk bestaande webpagina's regelmatig bij.

 - Gebruik een pingingservice zoals pingomatic om zoekmachines op de hoogte te brengen van wijzigingen op uw website.

- Bouwen interne koppelingen het verbinden van de pagina's van uw website.

- Kies een betrouwbare web hosting service.

- Gebruik een zinvolle URL-structuur die de inhoud van uw webpagina's beschrijft.

- Optimaliseer uw website om snel te laden.

- Zoek en repareer 404 fouten. Als zoekmachines een link naar een 404-fout volgen, zullen ze minder tijd besteden aan het crawlen van andere webpagina's op uw website.

-   Review van uw website robots.txt bestand om er zeker van te zijn dat het zoekmachines niet blokkeert of anderszins beperkt in het crawlen van uw website.

U kunt de frequentie bekijken waarmee de twee belangrijkste zoekmachines uw website crawlen door gebruik te maken van Google Zoek Console en Bing Webmaster Tools. Voor Google, log meld u aan bij uw Google Search Console-account en ga naar google.com/webmasters/tools/crawl-stats. Voor Bing logt u in op uw Bing Webmaster Tools-account en selecteert u "Crawl-informatie" in het vervolgmenu "Rapporten & gegevens".

Hoe stimuleer je zoekmachines om je website te indexeren

Zelfs als Google en Bing uw website regelmatig crawlen, is het mogelijk dat ze niet alle webpagina's indexeren. Zoekmachines kunnen uw hele website meerdere keren per dag crawlen, maar slechts driekwart van de pagina's indexeren. Webpagina's die niet in de index van Google of Bing zijn opgenomen, zullen geen organisch verkeer genereren.

Denk eraan dat niet alle webpagina's er baat bij hebben om geïndexeerd te worden. Webpagina's met dubbele inhoud, bijvoorbeeld, hoeven niet te worden geïndexeerd. Als twee webpagina's dezelfde inhoud bevatten, zal slechts een van hen hoog scoren in de zoekresultaten. Zoekmachines kunnen de andere webpagina indexeren, maar omdat deze dubbele inhoud bevat, zal deze aanzienlijk lager scoren en voor veel minder zoekwoorden. Met dat gezegd, moet u ernaar streven om de meeste pagina's van uw website, behalve de pagina's met dubbele inhoud, geïndexeerd te krijgen door Google en Bing.

Om zoekmachines aan te moedigen uw website en al zijn pagina's te indexeren, volgt u deze tips:

- Vermijd het publiceren van dezelfde inhoud op meerdere webpagina's. Elke webpagina moet unieke inhoud bevatten die niet elders op uw website te vinden is.

- Bouw backlinks, bij voorkeur van relevante en gezaghebbende bronnen, naar uw website.

- Promoot uw website op sociale media. Wanneer u nieuwe inhoud op uw website publiceert, deel dan een link naar die inhoud met uw volgers op Facebook en Twitter.

- Maak en gebruik een sitemap. Een sitemap stimuleert zoekmachines om uw website te crawlen en te indexeren.

- Probeer te voorkomen dat de locatie van webpagina's verandert. Als u een webpagina naar een andere locatie moet verplaatsen, wat betekent dat deze een andere URL krijgt, gebruik dan een 301 doorverwijzen.

U kunt zien welke webpagina's op uw website Google en Bing hebben geïndexeerd door gebruik te maken van de "site" zoekoperator. Zoek gewoon op uw website's domein De site operator vertelt Google en Bing om alle aanbiedingen behalve die van het opgegeven domein uit de zoekresultaten te filteren. Ervan uitgaande dat u geen andere woorden in uw zoekopdracht opneemt, zal de "site"-operator alle webpagina's op uw website onthullen die Google en Bing hebben geïndexeerd.

Zoekmachine optimalisatie (SEO) vereist een goed begrip van hoe zoekmachines werken. Als u niet weet hoe Google of Bing werken, zult u moeite hebben om uw website te optimaliseren voor hun zoekresultaten. Crawling vindt plaats wanneer zoekmachines een webpagina bezoeken om de code te lezen en te analyseren. In vergelijking daarmee vindt indexering plaats wanneer zoekmachines een webpagina toevoegen aan hun zoekresultaten.