Wat is het verschil tussen crawling en indexering bij SEO

Crawlen vs. Indexeren: Wat is het Verschil Tussen Deze 2 Gemeenschappelijke Zoekmachine Processen?

Bij het onderzoek naar zoeken motoroptimalisatie (SEO), zult u waarschijnlijk de termen "crawling" en "indexering" tegenkomen. Zoekmachines gebruiken complexe algoritmen om de sleutelwoorden en posities voor die websites rang. Of het nu Google is, Bing of een zoekmachine van een lager niveau, maar ze vertrouwen allemaal op kruipend en indexering.

Wat is kruipen?

Crawlen wordt ook wel spideren genoemd en is een zoekmachineproces waarbij de code van een webpagina wordt gelezen en vervolgens de code van de webpagina. inhoud. Om te bepalen waar en hoe een webpagina moet worden gerangschikt, moeten zoekmachines kruipen het. Via crawling kunnen zoekmachines alle zichtbare elementen analyseren, maar ook verborgen elementen, zoals meta tags, op een webpagina. Met behulp van deze informatie kunnen zoekmachines de juiste zoekrangorde bepalen voor

Zoekmachines crawlen webpagina's door ze te bezoeken met bots. Google, for example, uses Googlebot, whereas Bing uses Bingbot. There are typically two variations of each crawling bot: desktop and mobile. The desktop version of simulates a desktop user, whereas the mobile version simulates a mobile user. Regardless, all search engine bots are designed to crawl web pages.

Wat is indexeren?

Indexeren daarentegen houdt in dat een webpagina aan de zoekresultaten wordt toegevoegd. Indexeren komt na crawlen. Pas nadat Google of Bing een website hebben gecrawld, zullen zij deze indexeren.

Zoekmachines hebben enorme en steeds veranderende databases, bekend als een index, die bestaat uit organische vermeldingen. Wanneer zoekmachines een webpagina indexeren, maken ze er één of meer organische vermeldingen voor aan. De organische vermeldingen worden toegevoegd aan de zoekresultaten, zodat gebruikers de webpagina kunnen vinden wanneer zij zoeken op relevante trefwoorden.

Hoe stimuleer je zoekmachines om je website te crawlen

Zoekmachines beginnen uw website meestal meteen te crawlen nadat ze hem hebben ontdekt. Zodra Google en Bing zich bewust worden van uw website, zullen ze langskomen met bots - respectievelijk Googlebot en Bingbot - om de code te lezen. De frequentie waarmee zoekmachines uw website crawlen, kan echter fluctueren.

In de eerste maanden na de lancering van uw website kunt u merken dat uw website vaak wordt gecrawld, gevolgd door een sterke daling waarbij uw website zelden wordt gecrawld. Als Google en Bing uw website minder vaak crawlen, kan dit ertoe leiden dat wijzigingen onopgemerkt blijven. Als u bijvoorbeeld de inhoud van een webpagina wijzigt titel tag op maandag, maar Google crawlt de pagina pas op vrijdag, de oud title tag blijft nog vier dagen van kracht.

Om zoekmachines aan te moedigen uw website vaker te crawlen, volgt u deze tips:

- Maak een sitemap en geef de locatie ervan op uw website in Google Zoek Console en Bing Webmaster Tools.

- Publiceer nieuwe webpagina's en werk bestaande webpagina's regelmatig bij.

 - Gebruik een pingingservice zoals pingomatic om zoekmachines op de hoogte te brengen van wijzigingen op uw website.

•   Build internal links connecting your website’s pages.

- Kies een betrouwbare web hosting service.

- Gebruik een zinvolle URL-structuur die de inhoud van uw webpagina's beschrijft.

- Optimaliseer uw website om snel te laden.

•   Find and fix 404 errors. When search engines follow a link to a 404 error, they’ll spend less time crawling other web pages on your website.

•   Review your website’s robots.txt file to ensure it doesn’t block or otherwise restrict search engines from crawling your website.

You can view the frequency at which the two major search engines crawl your website by using Google Search Console and Bing Webmaster Tools. For Google, log in to your Google Search Console account and visit google.com/webmasters/tools/crawl-stats. For Bing, log in your Bing Webmaster Tools account and select “Crawl Information” under the “Reports & Data” drop-down menu.

Hoe stimuleer je zoekmachines om je website te indexeren

Zelfs als Google en Bing uw website regelmatig crawlen, is het mogelijk dat ze niet alle webpagina's indexeren. Zoekmachines kunnen uw hele website meerdere keren per dag crawlen, maar slechts driekwart van de pagina's indexeren. Webpagina's die niet in de index van Google of Bing zijn opgenomen, zullen geen organisch verkeer genereren.

Denk eraan dat niet alle webpagina's er baat bij hebben om geïndexeerd te worden. Webpagina's met dubbele inhoud, bijvoorbeeld, hoeven niet te worden geïndexeerd. Als twee webpagina's dezelfde inhoud bevatten, zal slechts een van hen hoog scoren in de zoekresultaten. Zoekmachines kunnen de andere webpagina indexeren, maar omdat deze dubbele inhoud bevat, zal deze aanzienlijk lager scoren en voor veel minder zoekwoorden. Met dat gezegd, moet u ernaar streven om de meeste pagina's van uw website, behalve de pagina's met dubbele inhoud, geïndexeerd te krijgen door Google en Bing.

Om zoekmachines aan te moedigen uw website en al zijn pagina's te indexeren, volgt u deze tips:

- Vermijd het publiceren van dezelfde inhoud op meerdere webpagina's. Elke webpagina moet unieke inhoud bevatten die niet elders op uw website te vinden is.

- Bouw backlinks, bij voorkeur van relevante en gezaghebbende bronnen, naar uw website.

- Promoot je website op sociale media. Wanneer je nieuwe inhoud op je website publiceert, deel er dan een link naar met je Facebook en volgers op Twitter.

- Maak en gebruik een sitemap. Een sitemap stimuleert zoekmachines om uw website te crawlen en te indexeren.

- Probeer te voorkomen dat de locatie van webpagina's verandert. Als u een webpagina naar een andere locatie moet verplaatsen, wat betekent dat deze een andere URL krijgt, gebruik dan een 301 doorverwijzen.

U kunt zien welke webpagina's op uw website Google en Bing hebben geïndexeerd door gebruik te maken van de "site" zoekoperator. Zoek gewoon op uw website's domein De site operator vertelt Google en Bing om alle aanbiedingen behalve die van het opgegeven domein uit de zoekresultaten te filteren. Ervan uitgaande dat u geen andere woorden in uw zoekopdracht opneemt, zal de "site"-operator alle webpagina's op uw website onthullen die Google en Bing hebben geïndexeerd.

Zoekmachine optimalisatie (SEO) vereist een goed begrip van hoe zoekmachines werken. Als u niet weet hoe Google of Bing werken, zult u moeite hebben om uw website te optimaliseren voor hun zoekresultaten. Crawling vindt plaats wanneer zoekmachines een webpagina bezoeken om de code te lezen en te analyseren. Ter vergelijking, indexeren vindt plaats wanneer zoekmachines een webpagina toevoegen aan hun zoekresultaten.