Anggaran Perayapan: Apakah Anda Menyulitkan Google untuk Merayapi dan Mengindeks Situs Web Anda?

Bagaimana Google merayapi situs web Anda akan memengaruhi pencarian peringkat. Jika laba-laba perusahaan Mountain View jarang merangkak situs web Anda atau jika mereka tidak merayapi semua halaman situs Anda, Anda dapat mengharapkan peringkat pencarian yang lebih rendah. Jika Google merayapi situs web Anda terlalu sering, hal ini dapat menyebabkan waktu muat yang lebih lama bagi pengunjung, yang juga dapat berdampak negatif pada peringkat pencarian situs Anda. Dengan memahami perayapan anggaranAnda dapat mengoptimalkan situs web Anda sehingga Google dapat merayapinya dengan lebih efisien.

Apa itu Anggaran Perayapan?

Anggaran crawl mengacu pada jumlah total halaman web di situs web Anda yang ingin di-crawl Google dan dapat di-crawl pada waktu tertentu. Ini terdiri dari dua elemen utama: batas tingkat perayapan dan permintaan perayapan.

Apa yang dimaksud dengan Crawl Rate Limit?

Crawl rate limit adalah jumlah halaman web simultan yang dapat di-crawl Google di situs web Anda, dikombinasikan dengan frekuensi di mana Google dapat mengambil halaman web tersebut. Jika situs web Anda memiliki batas tingkat perayapan yang tinggi, Google akan merayapi lebih banyak halamannya sekaligus dan mengambilnya lebih sering. Sebaliknya, jika situs web Anda memiliki batas tingkat perayapan yang rendah, Google akan merayapi lebih sedikit halaman sekaligus dan lebih jarang mengambilnya.

Google menetapkan batas tingkat perayapan untuk setiap situs web sehingga tidak secara tidak sengaja memperlambatnya saat merangkak itu. Tanpa batas tingkat perayapan, Google dapat membanjiri situs web Anda server dengan jumlah permintaan yang berlebihan. Karena server Anda menjadi macet dengan permintaan, situs web Anda akan membutuhkan waktu lebih lama untuk dimuat oleh pengunjung. Batas tingkat perayapan memungkinkan Google untuk merayapi situs web Anda tanpa memengaruhi kinerjanya.

Apa yang dimaksud dengan Crawl Demand?

Crawl demand, elemen lain dari crawl budget, adalah frekuensi di mana Google ingin merayapi halaman situs web Anda. Dengan kata lain, ini adalah pengukuran seberapa banyak Google ingin merayapi situs web Anda.

Halaman web yang menghasilkan banyak lalu lintas, serta keterlibatan yang kuat sinyalbiasanya memiliki permintaan crawl yang lebih tinggi daripada yang menghasilkan sedikit atau tanpa lalu lintas. Lalu lintas mencerminkan popularitas halaman web. Dan jika sebuah halaman web populer, Google akan lebih sering merayapi halaman tersebut daripada halaman web yang tidak populer.

Di hampir semua situs web, beranda akan memiliki permintaan crawl yang lebih tinggi daripada subhalaman. Karena beranda adalah hal pertama yang dilihat sebagian besar pengunjung saat mengakses situs web Anda, Google akan merayapi beranda lebih sering daripada halaman situs Anda yang lain. Permintaan crawl mencerminkan keinginan Google untuk merayapi berbagai halaman situs web Anda.

Menyewa Konsultan SEO

Cara Meningkatkan Batas Tingkat Perayapan Situs Web Anda

Meskipun secara otomatis ditetapkan oleh Google, Anda dapat mengoptimalkan situs web Anda untuk mencapai batas tingkat perayapan yang lebih tinggi. Di Google Konsol Pencarian (GSC), misalnya, Anda dapat menentukan frekuensi di mana Anda ingin Google merayapi situs web Anda. Saat masuk ke GSC, klik tombol di bilah sisi berlabel "Buka halaman tua versi lama." Setelah GSC versi lama dimuat, klik ikon roda gigi dan pilih "Site Settings." Selanjutnya, pilih opsi untuk membatasi tingkat perayapan Google, di mana Anda dapat menentukan tingkat perayapan yang disukai untuk situs web Anda.

Tingkat crawl terendah yang didukung di GSC adalah 0,002 permintaan per detik, sedangkan tingkat crawl tertinggi yang didukung di GSC adalah dua permintaan per detik. Perlu diingat, meskipun Anda menetapkan tingkat crawl situs web Anda ke level tertinggi, Google mungkin akan lebih jarang merayapi situs web tersebut. Hal ini terjadi jika Google yakin tingkat crawl yang Anda tentukan akan menyebabkan masalah kinerja, seperti waktu muat yang lama. Daripada menghabiskan sumber daya server Anda dalam jumlah yang berlebihan, Google hanya akan lebih jarang merayapi.

Karena kecepatan memainkan peran dalam batas tingkat perayapan, Anda harus mengoptimalkan situs web Anda sehingga dapat menangani lebih banyak permintaan simultan tanpa melengkung di bawah tekanan. Jika Anda menggunakan layanan web hosting bersama, pertimbangkan untuk meningkatkan ke server pribadi virtual (VPS) atau paket web hosting khusus.

Meskipun murah dan mudah dikonfigurasi, layanan web hosting bersama tidak memiliki sumber daya seperti VPS dan rekan-rekannya yang berdedikasi. Seperti namanya, layanan web hosting bersama memaksa Anda untuk berbagi server dengan situs web lain. Tidak jarang server bersama menjadi tuan rumah ratusan, terkadang ribuan, situs web. Dengan begitu banyak situs web yang dihosting di server yang sama, Google akan menetapkan batas tingkat perayapan yang rendah. VPS atau paket hosting web khusus akan memberi situs web Anda lebih banyak sumber daya untuk menangani permintaan perayapan Google.

Cara Meningkatkan Permintaan Perayapan Situs Web Anda

Ada juga cara untuk mengoptimalkan situs web Anda untuk permintaan perayapan yang lebih tinggi. Secara khusus, Anda harus meningkat popularitas seluruh situs web Anda, serta halaman webnya, dengan membuat dan menerbitkan konten berkualitas tinggi konten. Jika situs web Anda berisi konten berkualitas tinggi, pengunjung akan menghabiskan lebih banyak waktu di dalamnya. Google kemudian akan mengenali durasi kunjungan yang lebih lama ini sebagai tanda popularitas, yang seharusnya mendorong Google untuk merayapi situs web Anda lebih sering.

Mempromosikan situs web Anda di media sosial dapat membantu Anda mencapai permintaan crawl yang lebih tinggi. Ketika Anda membagikan tautan ke situs web Anda di Facebook atau Twitter, pengguna jaringan media sosial masing-masing dapat mengunjungi situs Anda. Ketika lalu lintas situs web Anda meningkat, Google akan melihatnya sebagai situs yang populer.

Memperbarui konten situs web Anda secara teratur mendorong permintaan crawl yang lebih tinggi. Jika halaman web tetap tidak berubah untuk waktu yang lama, Google tidak akan sering merayaknya. Lagi pula, tidak ada gunanya merayapi halaman web jika Google sudah tahu apa yang ada di dalamnya. Oleh karena itu, Anda harus membiasakan diri memperbarui halaman situs Anda secara teratur. Menambahkan konten baru atau memodifikasi konten yang sudah ada menunjukkan kepada Google bahwa situs web Anda masih segar, sehingga Google akan ingin merayapi lebih sering.

Jangan biarkan anggaran crawl mencegah situs web Anda mendapat peringkat tinggi dalam hasil penelusuran. Dengan mengoptimalkan situs web Anda untuk batas tingkat perayapan dan permintaan perayapan yang lebih tinggi, Google akan merayapi situs web Anda dengan lebih efisien. Dan seiring dengan meningkatnya anggaran crawl situs web Anda, begitu pula peringkatnya di mesin telusur paling populer di dunia.

Terakhir diperbarui pada 2022-12-28T09:49:14+00:00 oleh Lukasz Zelezny

Indeks