Mnogi vlasnici web stranica suočeni su s problemom zabrane indeksiranja resursa i njihovog uklanjanja s pretraživača. To se obično događa jer web stranica postaje zastarjela i nevažna, izdavač ili posjetitelji gube zanimanje za web stranicu ili web stranica sadrži lične, pa čak i povjerljive podatke.
Instrukcije
Korak 1
Postoji mnogo načina za uklanjanje web mjesta s pretraživača.
Prvi i najlakši način brisanja rezultata upita s pretraživača je brisanje stranice sa same web lokacije ili potpuno brisanje CMS stranice putem FTP veze. Za nekoliko dana pretraživač će ažurirati bazu podataka i ukloniti vezu do vašeg resursa iz rezultata pretraživanja.
Korak 2
Najpopularniji način među webmasterima da zaštite web mjesto, njegove pojedinačne odjeljke ili stranice od indeksiranja i tako uklone veze iz rezultata pretraživanja je uređivanje datoteke robots.txt.
Možete zatvoriti odvojenu stranicu od indeksiranja pomoću koda:
Korisnički agent: *
Disallow: /page.html (zatvaranje stranice page.html)
Mnogo je autorskih uputa o tome kako koristiti kodove za datoteku robots.txt na Internetu.
Korak 3
Treći način uklanjanja stranica web mjesta s pretraživača je upotreba robotske metaoznake na njezinim stranicama. Oznaka je napisana u HTML kodu skrivenih stranica između oznaka.
Tako će nakon ponovnog indeksiranja PS stranice stranice s ovom metatagom odustati od pretraživanja. Nedostatak ove metode je što mnoge moderne web stranice koriste tpl predloške, što znači da ćete morati ručno promijeniti kôd na stotinama, možda i hiljadama stranica.
Korak 4
Četvrti način uklanjanja web lokacija s pretraživača je upotreba zaglavlja X-Robots-Tag. Suština ovog zaglavlja slična je upotrebi prethodne metaoznake, međutim unos se mora nalaziti u http zaglavljima:
Oznaka X-Robots: noindex, nofollow
Korak 5
Najučinkovitiji način uklanjanja web stranice (u potpunosti) s pretraživača je uklanjanje s panela webmastera. Nakon ažuriranja (3-7 dana), web lokacija neće biti dostupna pretraživaču. Panel webmastera dostupan je za pretraživače Yandex (https://webmaster.yandex.ru/delurl.xml) i Google (https://webmaster.yandex.ru/delurl.xml).