Crawl budget adalah salah satu aspek yang harus dioptimasi dalam technical SEO, terutama untuk website dengan ukuran besar (lebih dari 1 juta page unik) seperti e-commerce.
Google sendiri memiliki dokumen untuk optimasi crawl budget.
Update terbaru, Google memberikan penjelasan lebih panjang tentang optimasi crawl budget pada dokumennya.
Apa saja Update pada Dokumen Optimasi Crawl Budget?
Berikut adalah rangkumannya:
- Setiap situs memiliki batasan yang sama. Ketika tidak ada permintaan untuk perayapan lebih banyak dan situsnya “sehat”, maka Google akan melakukan perubahan pada batas perayapan.
- Untuk Googlebot, permintaan bervariasi berdasarkan ukuran situs, frekuensi update, kualitas halaman, dan relevansi jika dibandingkan dengan situs lain.
- Setiap crawler/perayap memiliki permintaan yang berbeda dan seluruh batas perayapan disebar pada semua crawler. Jadi, satu crawler dengan demand tinggi dapat mengurangi demand crawler lainnya.
- Perbaiki loading speed seperti meningkatkan server response time dan resources. Pakai HTTP caching. Google mendukung 304 HTTP status kode. Jika halaman belum berubah sejak Google marayapinya, memberikan status kode 304 akan memberi tahu Google untuk memakai versi cached, sehingga menghemat bandwidth server.
Implikasi bagi SEO
Dari update pada dokumen optimasi crawl budget ini, Google mempertegas bahwa server harus cukup responsif dan kualitas konten juga penting.
Bukan sekadar berapa kali Google melakukan perayapan pada situs Anda.
Terdapat juga penjelasan bahwa jika ada crawler yang demand tinggi, maka crawler lain akan menyesuaikan.
Hal ini menandakan bahwa perlu pemblokiran crawler yang tidak diperlukan.
Optimasi Situs Anda untuk Crawl Budget yang Efisien!
Begitu situs Anda berukuran besar, crawl budget sangat vital karena berefek langsung pada bisnis dan bagaimana kualitas performa SEO.
Update pada dokumen optimasi crawl budget perlu dibaca dan dipahami oleh para SEO specialist, terutama yang menangani situs dengan ukuran besar.
Apakah Anda sudah membaca update pada dokumen ini?
Jika teman-teman memiliki pertanyaan terkait, silakan tuliskan pada kolom komentar di bawah atau bisa gabung ke grup Telegram DailySEO ID di sini.
Teman-teman juga bisa ajukan topik selanjutnya untuk kami bahas! Jika ingin belajar SEO dari ahlinya, yuk belajar di course-nya DailySEO ID!
Referensi:
https://www.seroundtable.com/google-updates-optimize-your-crawl-budget-41732.html
