Z nalogo odstranjevanja posameznih strani ali celotnega spletnega mesta iz iskalnikov se spletni skrbnik srečuje pri spreminjanju informacij, spreminjanju domene, kombiniranju več virov in številnih drugih razlogih. Obstaja več načinov za rešitev težave, odvisno od želenega rezultata.
Navodila
Korak 1
Izbrišite stran, ki jo želite indeksirati, tako da strežnik pri poskusu navigacije do izbrane spletne strani HTTP / 1.1 404 Not Found najde sporočilo o napaki. Če želite uporabiti izbrane spremembe, morate počakati, da robot znova dostopi do zahtevane strani.
2. korak
S pomočjo korenske datoteke robota robots.txt izključite izbrane odseke ali strani iz indeksiranja iskalnika. Če želite preprečiti prikaz skrbniške plošče v iskalniku, uporabite ukaz: User-Agent: * Diaallow: / admin / Ali, če želite izbrano stran izključiti iz indeksiranja, vnesite vrednost: User-Agent: * Disallow: / selected_page.html # Če želite uveljaviti spremembe, mora robot ponovno obiskati izbrano stran.
3. korak
Uporabite metodo meta-označevanja, da na vse zahtevane strani dodate pravilo, določeno v kodi HTML: To je potrebno za izključitev neželenih strani iz iskalnika.
4. korak
Izberite metodo za ustvarjanje X-Robots-Tag za vnos ukazov v glavo http, ki niso prikazani v kodi strani: X-Robots-Tag: noindex, nofollow Ta metoda je najbolj uporabna za izključitev izbranih strani ali odsekov iz indeksiranja tuji iskalniki.
5. korak
Uporabite posebno nadzorno stran za spletne skrbnike v Yandexu: https://webmaster.yandex.ru/deluri.xml ali v Googlu: https://www.google.com/webmasters/tools. To se naredi za prepoved prikaza želenega stran, odsek ali celotno spletno mesto v izbranem iskalniku.
