Po straneh vsakega spletnega mesta redno iščejo iskalni roboti, ki podatke na spletnem mestu obdelujejo tako, da so na voljo na zahtevo uporabnikov v iskalnikih. Obiski obiskovalcev iz iskalnikov pozitivno vplivajo na obisk strani in spodbujajo razvoj vira. Če pa na spletnem mestu obstajajo strani, katerih informacije niso namenjene internetni publiki (na primer osebne strani uporabnikov ali stran za registracijo), potem prehod z iskalnikov na take strani ni potreben in bolje prepovedati indeksiranje teh informacij.
Potrebno
- - imeti svojo spletno stran
- - poznati povezave do strani, katerih indeksiranje bi moralo biti prepovedano.
- - imeti vsaj osnovno znanje HTML
Navodila
Korak 1
Če želite iskalnemu robotu preprečiti indeksiranje določenih strani spletnega mesta, morate spremeniti datoteko robots.txt, če je že na vašem spletnem mestu, ali ustvariti to datoteko.
2. korak
Če je datoteka robots.txt že naložena na spletno mesto in jo je mogoče urediti neposredno z nadzorne plošče vira, odprite datoteko robots.txt prek spletne storitve za urejanje.
3. korak
Če želene datoteke ni mogoče spremeniti neposredno z nadzorne plošče, odprite datoteko robots.txt v brskalniku s klikom na povezavo do te datoteke. Kopirajte vse podatke s strani, ki se odpre, in jih prilepite na list v Beležnici.
4. korak
Če na spletnem mestu ni datoteke robots.txt, odprite program »Beležnica«, v novi dokument katerega boste morali vnesti potrebno kodo.
5. korak
Na prazen list besedilnega dokumenta napišite prvo zahtevano vrstico:
Uporabniški agent: *
6. korak
Nato s pritiskom na tipko Enter pojdite na naslednjo vrstico in vnesite naslednjo kodo:
Disallow: / index / page3 Disallow: označuje, da ni indeksiranja, in / index / page3 je povezava do strani, ki je ni treba indeksirati. Namesto povezave / indeksa / strani3 vstavite povezavo do strani svojega spletnega mesta, ki jo želite blokirati za obdelavo s strani robotov.
7. korak
Upoštevajte, da samo ime domene na začetku povezave manjka; njegova prisotnost v vnosu pomeni poševnico naprej. Pri iskanju po spletnem mestu iskalni robot samodejno vstavi ime domene v take povezave. Zato na ta način pišite povezave do potrebnih strani.
8. korak
Po zavrnitvi: lahko postavite ne le povezavo do določene strani, temveč tudi povezavo do katerega koli odseka ali imenika spletnega mesta. Podobno lahko prepovedate indeksiranje želenega dela spletnega mesta.
9. korak
Če je treba robotom prepovedati obdelavo več različnih odsekov vira, v novo vrstico napišite povezavo do vsakega odseka ali strani, na začetku katere ne pozabite postaviti vnosa Disallow:.
10. korak
Če želite dokončati spreminjanje datoteke robots.txt, med urejanjem datoteke na nadzorni plošči kliknite gumb »Shrani« ali shranite besedilni dokument z vnosi pod imenom robots.txt in naložite to datoteko na spletno mesto.
