Proračun za indeksiranje

Opis : Proračun indeksiranja je broj stranica koje bot tražilice, poput Googlebota, indeksira na web stranici unutar određenog razdoblja. Tražilice imaju ograničene resurse, pa svakoj web stranici dodjeljuju "proračun". Taj proračun ovisi o čimbenicima kao što su brzina poslužitelja web stranice, učestalost ažuriranja i njezin ukupni autoritet.

Ako se web stranica sporo učitava, ima mnogo preusmjeravanja ili sadrži mnogo URL parametara niske vrijednosti, bot može brzo potrošiti svoj dodijeljeni proračun. Kao rezultat toga, mogao bi napustiti stranicu bez otkrivanja ili indeksiranja važnog sadržaja, što može spriječiti pojavljivanje novih stranica u rezultatima pretraživanja.

Primjer : Internetska trgovina odjećom omogućuje korisnicima filtriranje proizvoda prema boji, veličini, marki i cijeni. Ova postavka stvara milijune jedinstvenih URL-ova. Googlebot na kraju troši svoj proračun za indeksiranje na ove beskrajne varijacije filtera umjesto da indeksira važne stranice kategorija. Budući da iscrpljuje svoje resurse na ovim URL-ovima niske vrijednosti, propušta indeksiranje novopokrenute stranice marke "Ljetna kolekcija". Kao rezultat toga, novi proizvodi se ne pojavljuju u rezultatima Google pretraživanja, što trgovinu košta vrijednog organskog prometa.