Cara Optimasi Anggaran Perayapan (Crawl Budget)

Apa itu anggaran perayapan dan bagaimana cara mengoptimalkan nya?

Cara Optimasi Anggaran Perayapan (Crawl Budget) untuk mendapatkan peringkat halaman yang lebih baik di Google dari hasil pemindahan Googlebot .

Apakah Anda ingin tahu apakah situs web Anda dihargai oleh Google ? Maka hal pertama yang harus dilakukan adalah memahami berapa banyak sumber daya yang Google putuskan untuk didedikasikan untuk pemindaiannya , yaitu memahami Anggaran Perayapan yang membuat Anda tersedia. Tetapi begitu Anda memahaminya mengapa tidak mencoba mengoptimalkannya sehingga Anda menggunakannya untuk memindai hanya konten yang paling penting untuk situs web Anda?

Mari kita coba untuk memahami apa itu crawl anggaran dan bagaimana mengoptimalkannya!

Cara kerja Googlebot

Googlebot adalah perayap Google, atau lebih tepatnya Spider yang menjelajahi web selama 24 jam dalam sehari, mencari laman baru untuk diindeks (kami telah membahas hal ini dalam artikel ini tentang pengindeksan dan penentuan posisi situs web di Google ).

Untuk melakukan ini, ia mengikuti tautan dan arahan yang ditemukannya di file robots.txt dari situs web yang mengaturnya.

Web terdiri dari milyaran halaman, dan banyak yang dibuat setiap saat, sehingga Anda akan mengerti bahwa Googlebot sangat mustahil untuk dapat memindai semua halaman. Karena alasan ini sehingga lahirlah Anggaran Perayapan.

Apa yang dimaksud dengan perayapan anggaran

Anggaran perayapan (Crawl Budget) tidak lebih dari jumlah sumber daya yang Google tetapkan untuk didedikasikan ke situs web untuk perayapan dan pengindeksannya . Parameter ini menentukan berapa banyak halaman, berapa banyak gambar dan khususnya berapa kilobyte situs web Googlebot yang akan dipindai dan diunduh.

Jelas semakin besar jumlah halaman dan Kilobyte yang diunduh, semakin besar pula pentingnya atribut Google terhadap situs web tersebut.

Tetapi bagaimana nilai-nilai ini dapat dipantau?

Pantau perayapan anggaran dari konsol pencarian

Dalam Cara Optimasi Anggaran Perayapan, Nilai-nilai ini dapat diverifikasi menggunakan alat gratis (dan sangat diperlukan) yang membuat Google tersedia untuk kita: Google Search Console . Di dalam, sayangnya untuk saat ini hanya dalam versi lama, ada bagian yang disebut statistik pindai di mana dimungkinkan untuk melihat jumlah halaman yang dipindai setiap hari, Kilobyte diunduh setiap hari dan waktu yang dihabiskan selama 90 hari terakhir. unduh halaman (dalam milidetik). Mari kita lihat nilai-nilai ini secara detail.

Cara Optimasi Anggaran Perayapan (Crawl Budget) untuk mendapatkan peringkat halaman yang lebih baik di Google dari hasil pemindahan Googlebot .

Jumlah halaman yang dipindai setiap hari

Jumlah halaman yang dipindai setiap hari menunjukkan kepada kami berapa banyak halaman situs web kami yang dikunjungi crawler . Jelas jika nilai ini lebih rendah dari jumlah halaman di situs itu adalah masalah karena itu berarti bahwa beberapa halaman, mungkin bahkan yang penting, tidak dikunjungi. Jika nilai ini setara atau bahkan lebih tinggi dari jumlah halaman situs web, itu artinya Googlebot dapat mengunjunginya secara mendalam dan lebih dari sekadar tanda positif.

Namun, sebelum mengevaluasi parameter ini, Anda perlu memahami berapa banyak halaman yang sebenarnya terdiri dari situs web tersebut, dan untuk halaman yang kami maksud juga misalnya konten multimedia (gambar, lampiran .pdf, dll.) Halaman arsip (kategori, tag, atribut, dll. ..) dan seterusnya. Untuk melakukan ini, Anda dapat menggunakan perangkat lunak Perayapan, seperti Screaming Frog atau Visual Seo Studio, yang meniru pemindaian Googlebot dengan segala cara.

Kilobyte habis setiap hari

Nilai ini dapat dianggap bahwa semakin tinggi semakin baik, tetapi dalam kenyataannya, dengan maksud untuk mengoptimalkan kinerja situs web, itu adalah nilai yang harus cenderung ke bawah karena seseorang harus selalu mencoba untuk mengoptimalkan berat halaman dengan cara sedemikian rupa. yang dapat diunduh dan dinavigasi dengan mudah oleh crawler dan pengguna.

Waktu yang sudah berlalu untuk mengunduh halaman

Berhubungan kembali dengan apa yang ditulis beberapa waktu lalu, nilai ini juga harus cenderung ke bawah , karena kami harus memastikan bahwa perayap dan pengguna dengan cepat mengunduh halaman situs kami.

Pantau perayapan anggaran dari log server

Perayapan anggaran juga dapat dipantau dengan menganalisis log server. Apa itu Log? Log tidak lebih dari permintaan “akses” yang dibuat ke server yang meng-host situs web kami. Bahkan ketika Googlebot memindai situs web kami, ia membuat permintaan ke server dan akibatnya menghasilkan log yang dapat dibaca dan ditafsirkan.

Dari analisis log, adalah mungkin untuk menemukan beberapa data mendasar yang tidak dapat kami verifikasi secara khusus dari Search Console:

  1. Agen Pengguna yang membuat “permintaan”, dalam kasus kami, kami tertarik untuk menganalisis semua permintaan yang dibuat oleh Googlebot;
  2. URL yang telah diminta, untuk memeriksa halaman mana yang telah dipindai Googlebot dan untuk memahami apakah itu benar-benar memindai halaman yang paling penting atau “membuang-buang waktu” dengan halaman sekunder;
  3. di sisi lain adalah mungkin untuk memahami halaman mana yang belum dipindai oleh Googlebot dan, jika itu adalah halaman-halaman penting, segera jalankan untuk sampul untuk memberikan visibilitas yang lebih besar;

Jika Anda mengandalkan platform hosting yang menyediakan Cpanel, seperti Serverplan atau Keliweb, Anda dapat mengunduh log langsung dari dalamnya dengan memilih item “akses mentah”. Setelah diunduh, gunakan saja perangkat lunak seperti SEO Log File Analyzer Screming Frog untuk melakukan analisis.

Alternatifnya adalah mengunduhnya langsung dari FTP.

Apa faktor-faktor yang secara negatif mempengaruhi perayapan anggaran

Karena mesin pencari memutuskan untuk menyediakan waktu terbatas untuk merayapi situs web kami, semua yang dapat membuat mereka “kehilangan” waktu berdampak negatif pada perayapan anggaran. Mari kita lihat secara khusus faktor-faktor apa yang memiliki dampak negatif terbesar:

  1. duplikasi konten: url berbeda yang mengarah ke halaman dengan konten yang identik;
  2. waktu pemuatan yang lama;
  3. konten berkualitas rendah;
  4. halaman yang disusupi;
  5. url yang mengarah ke halaman dengan 404 kesalahan

Cara optimasi dan meningkatkan anggaran perayapan

Dari pembahasan Cara Optimasi Anggaran Perayapanini, Sekarang mari kita lihat bagaimana mengoptimalkan dan meningkatkan perayapan anggaran yang disediakan Google untuk situs web kami.

Optimalkan struktur situs dan tautan internal

Dengan membuat struktur yang bersih dan efektif, selain membuat pengguna senang, Anda akan membuat pemindaian perayap lebih mudah dan Anda akan memiliki lebih banyak peluang untuk menelusuri semua halaman penting situs web Anda. Tautan internal dan remah roti adalah dua elemen mendasar untuk menentukan struktur situs, jadi cobalah untuk mengoptimalkannya sebaik mungkin dan memperbaiki semua tautan yang rusak.

Optimalkan konten

Pastikan semua konten Anda bernilai bagi Anda dan crawler. Jika ada halaman, seperti kebijakan cookie atau kebijakan privasi, tidak ada gunanya membiarkan perayap menavigasi, memblokir perayapan melalui file robots.txt.

Tingkatkan frekuensi publikasi konten baru

Jika Anda lebih sering menerbitkan konten baru (DI VALORE), dan melaporkannya melalui konsol pencarian, Googlebot akan memiliki lebih banyak insentif untuk mengunjungi situs web Anda lebih sering, meningkatkan perayapan anggaran yang membuat Anda tersedia.

Tautan masuk berkualitas

Semakin banyak tautan masuk yang Anda terima semakin besar peluang Googlebot untuk mengunjungi situs Anda. Juga, jangan lupa bahwa inbound link adalah salah satu dari 200 faktor peringkat Google, jadi jika dikelola dengan benar mereka akan meningkatkan kinerja SEO situs web Anda.

Comments are closed, but trackbacks and pingbacks are open.