Šta je Googlebot?
Googlebot je softver za web crawling koji se koristi od strane Google-a za otkrivanje i indeksiranje novih i ažuriranih web stranica na internetu. Koristi se za prikupljanje podataka o web stranicama i njihovim stranicama kako bi se dodale u Google indeks pretraživanja. Sadrži alate za indeksiranje mobilnih i stonih računara, kao i specijalizovane alate za indeksiranje vesti, slika i video zapisa.
Googlebot počinje dohvatanjem nekoliko web stranica, a zatim slede linkovi na tim stranicama kako bi pronašao nove URL-ove. Dok se kreće, Google bot indeksira tekst na stranicama koje posećuje i koristi te informacije da utvrdi relevantnost i autoritet stranice i njenih stranica za specifične upite pretraživanja. Ove informacije se zatim koriste za rangiranje web stranica u Google rezultatima pretrage (SERP-ovi).