Mengenal dan mengetahui cara kerja dari googlebot merupakan hal yang penting.
Googlebot adalah bot perayapan web google, atau sering dikenal dengan sebutan "spider". Perayapan adalah proses dalam menemukan situs baru atau pemutahiran yang akan dimasukan kedalam index google.
Google menggunakan banyak sekali komputer untuk menjalankan, merayapi dan mengambil milyaran halaman web. dalam merayapi halaman web tersebut google menggunakan algoritma yang setiap saat bisa saja terupdate atau termutakhiran. program algoritma google menentukan situs mana yang dirayapi, seberapa sering, dan berapa banyak halaman situs yang akan diambil.
Proses perayapan Googlebot dimulai dengan daftar URL halaman web, kemudian hasil perayapan ditambah dengan peta situs yang diberikan oleh Webmaster.
Baca juga : Index Artikel pada peta situ di Webmaster
Googlebot akan mendeteksi tautan (SRC dan HREF) pada tiap halaman dan akan menambahkan ke dalam daftar halaman yang dirayapi. situ baru, pembaharuan situs, links yang hilang, akan dicatat dan digunakan untuk memperbaharui Index Google.
Cara Googlebot Mengakses Situs
Bagi kebanyakan situs, Googlebot seharusnya tidak mengakses situs Anda lebih dari satu kali tiap beberapa detik secara rata-rata. Namun, karena penundaan jaringan, laju perayapan Googlebot bisa tampak sedikit lebih tinggi dalam periode waktu yang singkat.
Googlebot dirancang untuk didistribusikan di beberapa komputer guna meningkatkan kinerja dan skala seiring dengan bertumbuhnya web. Selain itu, untuk mengurangi penggunaan bandwidth, Google menjalankan banyak perayap di komputer yang terletak di dekat situs yang diindeksnya dalam jaringan. Oleh sebab itu, log Anda mungkin menampilkan kunjungan dari beberapa komputer di google.com, semua dengan agen-pengguna Googlebot. Tujuan Google adalah untuk merayapi sebanyak mungkin laman situs Anda pada setiap kunjungan tanpa membuat bandwidth server Anda kewalahan.
Pastikan Situs Dapat Dirayapi.
Googlebot menemukan situs dengan mengikuti tautan dari halaman ke halaman. halaman dengan kesalahan perayapan dicatat di search console dengan masalah apapun yang ditemukan oleh googlebot. oleh karena itu sering-seringlah buka search console untuk mengetahui keadaan situs anda, terjadi kesalahan atau tidak.demikian semoga bermanfaat.
Lainnya.
