GOOGLE BOT Nədir?
Googlebot, Google axtarış sistemi üçün lazımlı axtarış indeksi yaratmaq üçün internetdən sənədləri (linklər, sənədlər) toplayan Google tərəfindən fəal şəkildə istifadə edilən veb tarama proqramına verilən addır. Googlebot vasitəsilə o, Google veb dünyasındakı keçidləri izləyərək yeni saytları və səhifələri aşkar edir, skan edir və indeksləşdirir.
Axtarış motoru botları veb dünyasında bot (robot) və spider(hörümçək) adlanır. Googlebotun həmçinin Googlerobot və Google spider (Google spider) kimi adları var.
Googlebot əsasən iki fərqli məqsəd və cihaz, Googlebot masa üstü və Googlebot mobil üçün istifadə edilən veb brauzerləri adlandırmaq üçün istifadə olunur. Bu veb-brauzerlərin istifadəçi agentləri ümumi olsa da, onların üzərinə düşən vəzifələr və səhifələri idarə etmə üsulları bir-birindən fərqlidir.
Google axtarış motoru indeksini (indeksini) aktual saxlamaq və istifadəçilərə axtarış niyyətlərinə uyğun uğurlu nəticələr təqdim etmək üçün Googlebot davamlı olaraq internet dünyasını skan edir və mövcud səhifələri lazım olduqda yeniləyir, eyni zamanda yeniləri əlavə edir. aşkar edilmiş səhifələri axtarış indeksinə.
Google tərəfindən axtarış indeksində qeydiyyatdan keçən milyardlarla internet səhifəsi istifadəçinin etdiyi axtarış sorğusuna görə qiymətləndirilir və axtarış nəticələrində Google alqoritmi tərəfindən uğurlu hesab edilən səhifələr yuxarıdadır. Googlebot, axtarış sorğusuna cavab olaraq yaradılmış axtarış nəticələri səhifəsində müvafiq veb-saytları (veb səhifələr) sıralamazdan əvvəl müvafiq veb-saytların (veb-səhifələrin) tarama və indeksləşdirmə proseslərində fəal rol oynayır.
Googlebot necə işləyir?
Googlebot bir-birinin ardınca axtarış indeksində qeydə alınmış keçidlərdəki müxtəlif keçidlərə (səhifələrə) daxil olaraq müvafiq səhifələrdəki keçidləri izləyir və müvafiq olaraq internetdə yeni yaradılmış veb səhifələri aşkar edib indeksləşdirir.
Googlebot tərəfindən aşkar edilmiş veb səhifənin bütün məzmunu (məzmun mənbələri) həmin bot tərəfindən yüklənilir və sonra sayta daxil ola biləcək botlara təqdim edilmək üçün sıx yaddaşda saxlanılır.
Cache -ə alınan veb səhifənin resursları daha sonra müvafiq səhifəyə daxil olan Googlebot masa üstü, mobil, xəbərlər, şəkillər kimi botlar tərəfindən istifadə olunur. Proses zamanı Googlebot tərəfindən skan edilmiş veb səhifə aktuallığına uyğun olaraq indeksləşdirilir.
Googlebotun səhifədəki keçidləri izləməsi üçün müvafiq keçidlər href və ya src ilə istifadə edilməlidir. Səhifədə href və ya src ilə verilən linkin Googlebot tərəfindən skan edilməsi tələb edildikdə, müvafiq səhifə üçün HTTP sorğusu serverə göndərilir. Səhifənin hazırkı vəziyyətinə uyğun olaraq HTTP cavab kodu serverdən alınır və alınan koda uyğun olaraq səhifənin resurslarının skan edilməsi prosesi baş verir.
Googlebot tərəfindən serverə göndərilən HTTP sorğusunda 200 “OK” cavab kodu alınarsa, səhifənin resursları (kodları) bu cavab kodu ilə birlikdə Googlebot-a ötürülür və Googlebot müvafiq resursları skan edərək səhifəni indexləyir.Googlebot tərəfindən serverə göndərilən sorğuda istifadəçi-agent “Googlebot” kimi göstərilir və HTTP sorğusundan sonra giriş server tərəfindən Server giriş jurnalında qeyd olunur.
Googlebot Sitemap -dan fəal şəkildə istifadə edir
Xüsusilə sayta daxil olan axtarış motorlarının (veb brauzerlərinin) istifadəsi və saytdakı URL-lərin daha asan kəşf edilməsi üçün veb saytlar tərəfindən istifadə edilən sayt xəritələri Googlebot tərəfindən aktiv şəkildə istifadə edilir. Saytınızın URL xəritəsini Google Search Console vasitəsilə Googlebotlar tərəfindən aşkar edilməsini çox asanlaşdıra bilərsiniz.
Hazırda Googlebot tərəfindən taranan və indeksləşdirilən veb-səhifədə həyata keçirilən yeniləmə sayt xəritəsindəki müvafiq URL-in son dəyişdirilmiş (son redaktə tarixində) yenilənməsi və yerinə yetiriləcək ping vasitəsilə Google-a ötürülə bilər və Googlebot sayta keçid edərək müvafiq URL və ya URL-ləri skan edə bilir.
