Naš pristup upravljanju indeksiranjem stranica web stranice, izražen u nizu različitih postavki, rezultat je implementacije preporuka tražilica i SEO stručnjaka, kao i rezultat praktičnih opažanja indeksiranja pokrenutih web stranica. Nastavljamo prihvaćati i implementirati nove opravdane preporuke.

Koristimo kombinaciju nekoliko alata za upravljanje indeksiranjem web stranice i borbu protiv dupliciranog sadržaja:

Zabrana indeksiranja u datoteci robots.txt koristi se za smanjenje opterećenja poslužitelja koje se javlja prilikom indeksiranja velikog broja stranica s filtrima.
Zabrana indeksiranja pomoću robots tag-a kako bi se osiguralo da nepotrebne stranice nisu indeksirane i nisu uključene u sekundarni indeks.
Navođenje kanonskih stranica (rel canonical) za povezivanje identičnih stranica u jednu, za one stranice koje ipak trebaju biti indeksirane.

Ispod je detaljan opis postavki indeksiranja za svaku vrstu stranice.

Stranice kategorija

Stranice kategorija su glavne odredišne stranice za promociju, pa su uvijek otvorene za indeksiranje prema zadanim postavkama. U nekim slučajevima moguće ih je zatvoriti za indeksiranje.

Kako je implementirano:

Stranice kategorija nisu zatvorene za indeksiranje u robots.txt;
Prema zadanim postavkama, stranice kategorija nemaju robots tag i stoga su otvorene za indeksiranje.

Ako je potrebno, možete kontrolirati sadržaj robots tag-a za svaku stranicu kategorije. U svojstvima stranice možete omogućiti atribute nofollow i/ili noindex . Ako ih omogućite, oni će također biti postavljeni za sve proizvode za koje je ova kategorija roditelj. Međutim, ova postavka neće utjecati na podkategorije i njihove proizvode.

Linkovi na ove stranice prisutni su u datoteci sitemap.xml (osim ako opcija Uključi u mapu stranice nije onemogućena za stranicu).

Stranice s filtrima

Sve stranice s filtrima su zatvorene za indeksiranje prema zadanim postavkama. Budući da postoji mnogo kombinacija filtara i sadržaj stranica se prikazuje dinamički, čak i pristup ovim stranicama s nekoliko tražilica istovremeno može stvoriti značajno opterećenje na poslužitelju.

Kako je implementirano:

U robots.txt, sve kombinacije filtara koje sadrže više od tri filtra istovremeno nisu indeksirane.
Sve stranice s filtrima imaju robots tagove s noindex, follow i canonical vrijednostima s linkom na stranicu kategorije bez filtra.

Filteri za indeksiranje

Također je moguće otvoriti neke filtre ili njihove kombinacije (do dva filtra istovremeno) za indeksiranje pomoću značajke Filteri za indeksiranje.

Prilikom postavljanja indeksiranih filtara, možete odrediti kategoriju za koju će biti otvoreni (možete odrediti korijen kataloga) i odabrati 1 ili 2 svojstva filtra koja će se koristiti za otvaranje za indeksiranje. Ako su navedena dva svojstva, stranice s filtrima prema svakom od tih svojstava zasebno i prema kombinaciji tih dvaju svojstava bit će otvorene. No, filteri prema dvije vrijednosti za jedno svojstvo uvijek su zatvoreni za indeksiranje.

Za otvaranje indeksiranja stranica koriste se sljedeće postavke:

Stranice nisu inicijalno zatvorene za indeksiranje u robots.txt;
Ove stranice sadrže robots tag s index, follow i canonical vrijednostima s linkom na stranicu filtra koja se indeksira.

Stranice sortiranja i prikaza proizvoda

Stranice sortiranja (sadrže filter/sort_ u linku) i stranice različitih formata prikaza proizvoda (sadrže view_type= u linku) su nedvosmislene kopije, pa su zatvorene za indeksiranje prema zadanim postavkama svim mogućim sredstvima bez mogućnosti otvaranja za indeksiranje.

Stranice sortiranja/prikaza zatvorene su u robots.txt;
Prema zadanim postavkama, ove stranice imaju postavljen <meta name="robots" content="noindex, follow"> tag kako bi se onemogućilo indeksiranje, ali omogućilo daljnje povezivanje;
Ove stranice imaju canonical tag, koji vodi na sličnu stranicu bez navođenja formata sortiranja ili prikaza;
Ove stranice nisu uključene u sitemap.xml.

Stranice paginacije

Stranice paginacije sadrže jedinstveni sadržaj (različite proizvode), pa bi sve trebale biti indeksirane.
Stranice paginacije nisu zatvorene za indeksiranje u robots.txt ili pomoću robots tag-a.
Kako bismo spojili sve stranice u jednu, prema Googleovim preporukama, koristimo <rel="next"> i <rel="prev"> tagove.
Za sve stranice paginacije ne koristimo canonical tag s linkom na prvu stranicu.
Sve stranice paginacije imaju canonical tag s linkom na vlastitu stranicu paginacije.
Samo page=all stranica ima canonical tag s linkom na prvu stranicu, jer nema <rel="next"> i <rel="prev"> tagove.
Stranice paginacije nisu uključene u sitemap.xml.

Postoje i dvije alternativne postavke za stranice paginacije koje suprotstavljaju Googleovim zahtjevima, ali se nalaze u preporukama nekih SEO tvrtki. Ove opcije su prema zadanim postavkama onemogućene, ali se mogu omogućiti u administrativnom panelu stranice u odjeljku SEO → Dodatne SEO postavke:

Postavite canonical tag s linkom na prvu stranicu paginacije.
Na svim stranicama paginacije osim prve, postavite robots tag s noindex, follow vrijednostima.

Stranice brendova

Stranice brendova indeksiraju se prema istoj logici kao i stranice kategorija:

Korijenski linkovi stranica brendova nisu zatvoreni u robots.txt.
Stranice s filtrima s više od dvije razine, sortiranje i stranice različitih formata prikaza nisu indeksirane u robots.txt.
Stranice sortiranja i različitih formata prikaza zatvorene su pomoću robots tag-a s noindex, follow vrijednostima.
Stranice paginacije otvorene su za indeksiranje prema istoj logici kao i stranice paginacije kategorija.

Varijante proizvoda

Svaka varijanta proizvoda ima svoj URL.
Istovremeno, sve ove stranice sadrže link na kanonsku stranicu glavne varijante.
Stranice proizvoda nisu zatvorene za indeksiranje u robots.txt.
Stranice se mogu zatvoriti za indeksiranje pomoću robots tag-a ako je njihova roditeljska kategorija zatvorena.

Unaprijed postavljeni filtri

Stranice s unaprijed postavljenim filtrima kreirane su posebno za promociju i stoga su otvorene za indeksiranje prema zadanim postavkama, bez mogućnosti zatvaranja njihovog indeksiranja.
Nema zabrane indeksiranja unaprijed postavljenih filtara u robots.txt.
Na stranicama s unaprijed postavljenim filtrima nema robots tagova.
Stranice s unaprijed postavljenim filtrima imaju canonical tag koji vodi na sličnu stranicu s unaprijed postavljenim filtrom.
Linkovi na stranice s unaprijed postavljenim filtrima mogu se pronaći u filtrima i u datoteci sitemap.xml.

Osobni račun, naplata

Stranice naplate i osobnog računa zatvorene su za indeksiranje u robots.txt i pomoću robots tag-a s noindex, follow vrijednostima.

Tekstualne stranice, stranice vijesti

Nisu zatvorene za indeksiranje u robots.txt.
Prema zadanim postavkama, ne sadrže robots tag.
U svojstvima svake stranice možete konfigurirati vrijednost robots tag-a, što vam omogućuje isključivanje stranica iz indeksiranja u određenom trenutku.
Stranice s noindex nisu uključene u sitemap.xml.

Usporedba proizvoda

Tablica usporedbe proizvoda prikazuje se na stranicama kataloga, bez generiranja zasebnih stranica s vlastitim linkovima. Stoga, stranice usporedbe proizvoda ne postoje kao takve i nisu indeksirane.

Jezične verzije

Prema zadanim postavkama, sve jezične verzije dostupne korisnicima otvorene su za indeksiranje. Ako je potrebno, možete zatvoriti svaku jezičnu verziju za indeksiranje zasebno.

Jezične verzije nisu zatvorene za indeksiranje u robots.txt.
Linkovi na alternativne prijevode nalaze se u head bloku svake stranice i u sitemap.xml.

Jezične verzije imaju opciju No index. Ako je omogućena, primjenjuju se sljedeće postavke:

Za sve stranice ove jezične verzije postavljen je robots tag s noindex, nofollow vrijednostima.
Linkovi nisu postavljeni u head bloku i u sitemap.xml.
U zaglavlju, link na jezičnu verziju koja je zatvorena za indeksiranje označen je atributom rel=nofollow.