Številni lastniki spletnih mest se soočajo s težavo prepovedi indeksiranja virov in njihove odstranitve iz iskalnikov. Običajno se to zgodi, ker spletno mesto postane zastarelo in nepomembno, založnik ali obiskovalci zanj izgubijo zanimanje ali pa vsebuje osebne in celo zaupne podatke.
Navodila
Korak 1
Obstaja veliko načinov za odstranitev spletnega mesta iz iskalnikov.
Prvi in najlažji način brisanja rezultatov poizvedbe iz iskalnika je izbris strani s samega spletnega mesta ali popolno brisanje spletnega mesta CMS prek povezave FTP. Čez nekaj dni bo iskalnik posodobil bazo podatkov in iz rezultatov iskanja odstranil povezavo do vašega vira.
2. korak
Med spletnimi skrbniki je najbolj priljubljen način zaščite spletnega mesta, njegovih posameznih odsekov ali strani pred indeksiranjem in s tem odstranjevanja povezav iz rezultatov iskanja urejanje datoteke robots.txt.
Ločeno stran pred indeksiranjem lahko zaprete s kodo:
Uporabniški agent: *
Ne dovoli: /page.html (zapiranje strani page.html)
V internetu je veliko avtorskih navodil o uporabi kod za datoteko robots.txt.
3. korak
Tretji način odstranjevanja strani spletnih mest iz iskalnikov je uporaba metaoznake robots na svojih straneh. Oznaka je zapisana v kodi HTML skritih strani med oznakama.
Tako bodo po ponovnem indeksiranju spletnega mesta PS strani s to metaoznako izpadle iz iskanja. Pomanjkljivost te metode je, da številna sodobna spletna mesta uporabljajo predloge tpl, kar pomeni, da boste morali ročno spremeniti kodo na stotinah, morda na tisoče straneh.
4. korak
Četrti način odstranjevanja spletnih mest iz iskalnikov je uporaba glav X-Robots-Tag. Bistvo te glave je podobno uporabi prejšnje metaoznake, vendar mora biti vnos v glavah
Oznaka X-Robots: noindex, nofollow
5. korak
Najučinkovitejši način odstranitve spletnega mesta (v celoti) iz iskalnikov je odstranitev s podokna spletnega skrbnika. Po posodobitvi (3-7 dni) bo spletno mesto nedostopno iskalniku. Podokno spletnega skrbnika je na voljo za iskalnike Yandex (https://webmaster.yandex.ru/delurl.xml) in Google (https://webmaster.yandex.ru/delurl.xml).