Ποια είναι η διαφορά μεταξύ crawling και indexing στο SEO

Αναζήτηση vs. Ευρετηρίαση: Ποια είναι η διαφορά μεταξύ αυτών των 2 κοινών διαδικασιών των μηχανών αναζήτησης;

Κατά την έρευνα αναζήτηση βελτιστοποίηση μηχανών (SEO), πιθανώς θα συναντήσετε τους όρους "crawling" και "indexing". Οι μηχανές αναζήτησης χρησιμοποιούν πολύπλοκους αλγορίθμους για να υπολογίζουν τις λέξεις-κλειδιά και τις θέσεις για το οποίο δικτυακοί τόποι κατάταξη. Είτε πρόκειται για την Google, Bing ή μια μηχανή αναζήτησης χαμηλότερης βαθμίδας, ωστόσο, όλες βασίζονται στην ανίχνευση και ευρετηρίαση.

Τι είναι το Crawling;

Αναφέρεται επίσης ως spidering, το crawling είναι μια διαδικασία των μηχανών αναζήτησης που περιλαμβάνει την ανάγνωση του κώδικα μιας ιστοσελίδας και, στη συνέχεια, την περιεχόμενο. Για να καθορίσουν πού και πώς πρέπει να κατατάσσεται μια ιστοσελίδα, οι μηχανές αναζήτησης πρέπει να ερπυσμός αυτό. Η ανίχνευση επιτρέπει στις μηχανές αναζήτησης να αναλύσουν όλα τα ορατά στοιχεία, καθώς και τα κρυφά στοιχεία, όπως meta ετικέτες, σε μια ιστοσελίδα. Χρησιμοποιώντας αυτές τις πληροφορίες, οι μηχανές αναζήτησης μπορούν να καθορίσουν την κατάλληλη κατάταξη αναζήτησης για

Οι μηχανές αναζήτησης ανιχνεύουν ιστοσελίδες επισκεπτόμενες με bots. Η Google, για παράδειγμα, χρησιμοποιεί το Googlebot, ενώ η Bing χρησιμοποιεί το Bingbot. Συνήθως υπάρχουν δύο παραλλαγές του κάθε ρομπότ ανίχνευσης: desktop και mobile. Η desktop έκδοση του προσομοιώνει έναν desktop χρήστη, ενώ η mobile έκδοση προσομοιώνει έναν mobile χρήστη. Ανεξάρτητα από αυτό, όλα τα bots των μηχανών αναζήτησης έχουν σχεδιαστεί για να ανιχνεύουν ιστοσελίδες.

Τι είναι η ευρετηρίαση;

Η ευρετηρίαση, από την άλλη πλευρά, περιλαμβάνει την προσθήκη μιας ιστοσελίδας στα αποτελέσματα αναζήτησης. Η ευρετηρίαση ακολουθεί την ανίχνευση. Μόνο αφού η Google ή η Bing έχουν ανιχνεύσει έναν ιστότοπο θα τον ευρετηριάσουν.

Οι μηχανές αναζήτησης διαθέτουν τεράστιες και διαρκώς μεταβαλλόμενες βάσεις δεδομένων, γνωστές ως ευρετήριο, που αποτελούνται από οργανικές καταχωρίσεις. Όταν οι μηχανές αναζήτησης ευρετηριάζουν μια ιστοσελίδα, δημιουργούν μία ή περισσότερες οργανικές καταχωρίσεις για αυτήν. Οι οργανικές καταχωρίσεις προστίθενται στα αποτελέσματα αναζήτησης, επιτρέποντας στους χρήστες να βρίσκουν την ιστοσελίδα όταν αναζητούν σχετικές λέξεις-κλειδιά.

Πώς να ενθαρρύνετε τις μηχανές αναζήτησης να ανιχνεύσουν τον ιστότοπό σας

Οι μηχανές αναζήτησης θα αρχίσουν συνήθως να ανιχνεύουν τον ιστότοπό σας αμέσως μετά την ανακάλυψή του. Μόλις η Google και η Bing αντιληφθούν τον ιστότοπό σας, θα τον επισκεφθούν με bots - Googlebot και Bingbot, αντίστοιχα - για να διαβάσουν τον κώδικά του. Η συχνότητα με την οποία οι μηχανές αναζήτησης ανιχνεύουν τον ιστότοπό σας, ωστόσο, μπορεί να κυμαίνεται.

Μπορεί να παρατηρήσετε συχνή ανίχνευση κατά τη διάρκεια των πρώτων μηνών μετά την έναρξη λειτουργίας του ιστότοπού σας, ακολουθούμενη από μια απότομη πτώση κατά την οποία ο ιστότοπός σας ανιχνεύεται σπάνια. Καθώς η Google και η Bing ανιχνεύουν τον ιστότοπό σας λιγότερο συχνά, αυτό μπορεί να έχει ως αποτέλεσμα οι αλλαγές να περνούν απαρατήρητες. Για παράδειγμα, εάν τροποποιήσετε το κείμενο μιας ιστοσελίδας τίτλος ετικέτα τη Δευτέρα, αλλά η Google δεν ανιχνεύει τη σελίδα μέχρι την Παρασκευή, το παλιό title tag θα παραμείνει σε ισχύ για τέσσερις επιπλέον ημέρες.

Για να ενθαρρύνετε τις μηχανές αναζήτησης να ανιχνεύουν συχνότερα τον ιστότοπό σας, ακολουθήστε αυτές τις συμβουλές:

- Δημιουργήστε ένα sitemap και καθορίστε τη θέση του στον ιστότοπό σας στο Google Κονσόλα αναζήτησης και Bing Webmaster Tools.

- Δημοσιεύετε νέες ιστοσελίδες και ενημερώνετε τακτικά τις υπάρχουσες ιστοσελίδες.

 - Χρησιμοποιήστε μια υπηρεσία pinging, όπως το pingomatic, για να ενημερώνετε τις μηχανές αναζήτησης για τις αλλαγές που γίνονται στον ιστότοπό σας.

- Κατασκευάστε εσωτερικοί σύνδεσμοι συνδέοντας τις σελίδες του ιστότοπού σας.

- Επιλέξτε μια αξιόπιστη υπηρεσία φιλοξενίας ιστοσελίδων.

- Χρησιμοποιήστε μια ουσιαστική δομή URL που περιγράφει το περιεχόμενο των ιστοσελίδων σας.

- Βελτιστοποιήστε τον ιστότοπό σας ώστε να φορτώνει γρήγορα.

- Βρείτε και διορθώστε 404 λάθη. Όταν οι μηχανές αναζήτησης ακολουθούν έναν σύνδεσμο προς ένα σφάλμα 404, θα ξοδέψουν λιγότερο χρόνο για να ανιχνεύσουν άλλες ιστοσελίδες στον ιστότοπό σας.

-   Ανασκόπηση της ιστοσελίδας σας ρομπότ.txt για να διασφαλίσετε ότι δεν εμποδίζει ή δεν περιορίζει με άλλο τρόπο τις μηχανές αναζήτησης από το να ανιχνεύσουν τον ιστότοπό σας.

Μπορείτε να δείτε τη συχνότητα με την οποία οι δύο κύριες μηχανές αναζήτησης ανιχνεύουν τον ιστότοπό σας χρησιμοποιώντας τη διεύθυνση Κονσόλα αναζήτησης Google και Bing Webmaster Tools. Για την Google, log στο λογαριασμό σας στο Google Search Console και επισκεφθείτε τη διεύθυνση google.com/webmasters/tools/crawl-stats. Για το Bing, συνδεθείτε στο λογαριασμό σας Bing Webmaster Tools και επιλέξτε "Crawl Information" στο αναπτυσσόμενο μενού "Reports & Data".

Πώς να ενθαρρύνετε τις μηχανές αναζήτησης να ευρετηριάσουν τον ιστότοπό σας

Ακόμη και αν η Google και η Bing ανιχνεύουν τακτικά τον ιστότοπό σας, ενδέχεται να μην ευρετηριάζουν όλες τις ιστοσελίδες του. Οι μηχανές αναζήτησης μπορεί να ανιχνεύουν ολόκληρο τον ιστότοπό σας αρκετές φορές την ημέρα, αλλά να ευρετηριάζουν μόνο τα τρία τέταρτα των σελίδων του. Τυχόν ιστοσελίδες που παραλείπονται από το ευρετήριο της Google ή της Bing δεν θα δημιουργήσουν οργανική επισκεψιμότητα.

Λάβετε υπόψη ότι δεν θα επωφεληθούν όλες οι ιστοσελίδες από την ευρετηρίαση. Ιστοσελίδες με διπλό περιεχόμενο, για παράδειγμα, δεν χρειάζεται να ευρετηριάζονται. Εάν δύο ιστοσελίδες περιέχουν το ίδιο περιεχόμενο, μόνο η μία από αυτές θα κατατάσσεται ψηλά στα αποτελέσματα αναζήτησης. Οι μηχανές αναζήτησης μπορεί να ευρετηριάσουν την άλλη ιστοσελίδα, αλλά επειδή περιέχει διπλό περιεχόμενο, θα κατατάσσεται σημαντικά χαμηλότερα και για πολύ λιγότερες λέξεις-κλειδιά. Με αυτό το δεδομένο, θα πρέπει να προσπαθήσετε να ευρετηριάσετε τις περισσότερες από τις σελίδες του ιστοτόπου σας, εκτός από τις σελίδες διπλού περιεχομένου, από τη Google και τη Bing.

Για να ενθαρρύνετε τις μηχανές αναζήτησης να ευρετηριάσουν τον ιστότοπό σας και όλες τις σελίδες του, ακολουθήστε αυτές τις συμβουλές:

- Αποφύγετε τη δημοσίευση του ίδιου περιεχομένου σε πολλές ιστοσελίδες. Κάθε ιστοσελίδα θα πρέπει να διαθέτει μοναδικό περιεχόμενο που δεν υπάρχει αλλού στον ιστότοπό σας.

- Δημιουργήστε backlinks, κατά προτίμηση από σχετικές και έγκυρες πηγές, προς τον ιστότοπό σας.

- Προωθήστε τον ιστότοπό σας στα μέσα κοινωνικής δικτύωσης. Όταν δημοσιεύετε νέο περιεχόμενο στον ιστότοπό σας, μοιραστείτε έναν σύνδεσμο προς αυτό με τους οπαδούς σας στο Facebook και το Twitter.

- Δημιουργήστε και χρησιμοποιήστε έναν χάρτη σελίδων. Ένα sitemap ενθαρρύνει τις μηχανές αναζήτησης να ανιχνεύσουν και να ευρετηριάσουν τον ιστότοπό σας.

- Προσπαθήστε να αποφύγετε την αλλαγή της τοποθεσίας των ιστοσελίδων. Εάν πρέπει να μετακινήσετε μια ιστοσελίδα σε διαφορετική τοποθεσία, δηλαδή να έχει διαφορετική διεύθυνση URL, χρησιμοποιήστε ένα 301 ανακατεύθυνση.

Μπορείτε να δείτε ποιες ιστοσελίδες του ιστοτόπου σας έχουν ευρετηριαστεί από την Google και το Bing χρησιμοποιώντας τον τελεστή αναζήτησης "site". Απλά αναζητήστε τον ιστότοπό σας τομέας Συνεχίζεται με το "site:" Ο χειριστής site λέει στο Google και το Bing να φιλτράρουν όλες τις καταχωρίσεις εκτός από εκείνες που προέρχονται από τον καθορισμένο τομέα από τα αποτελέσματα αναζήτησης. Υποθέτοντας ότι δεν περιλαμβάνετε άλλες λέξεις στην αναζήτησή σας, ο τελεστής "site" θα αποκαλύψει όλες τις ιστοσελίδες του ιστοτόπου σας που έχουν ευρετηριαστεί από τη Google και το Bing.

Η βελτιστοποίηση μηχανών αναζήτησης (SEO) απαιτεί κατανόηση του τρόπου λειτουργίας των μηχανών αναζήτησης. Εάν δεν γνωρίζετε πώς λειτουργεί η Google ή η Bing, θα δυσκολευτείτε να βελτιστοποιήσετε τον ιστότοπό σας για τα αποτελέσματα αναζήτησης. Το crawling συμβαίνει όταν οι μηχανές αναζήτησης επισκέπτονται μια ιστοσελίδα για να διαβάσουν τον κώδικά της και να αναλύσουν τον κώδικα. Συγκριτικά, η ευρετηρίαση συμβαίνει όταν οι μηχανές αναζήτησης προσθέτουν μια ιστοσελίδα στα αποτελέσματα αναζήτησής τους.