Maraming mga may-ari ng website ang nahaharap sa problema ng pagbabawal sa pag-index ng mga mapagkukunan at ang kanilang pagtanggal mula sa mga search engine. Karaniwan itong nangyayari dahil ang site ay naging luma na at walang katuturan, nawalan ng interes ang publisher o mga bisita sa site, o naglalaman ang site ng personal at kahit na kumpidensyal na impormasyon.
Panuto
Hakbang 1
Maraming paraan upang alisin ang isang site mula sa mga search engine.
Ang una at pinakamadaling paraan upang tanggalin ang mga resulta ng query mula sa search engine ay tanggalin ang pahina mula sa site mismo o ganap na tanggalin ang site ng CMS sa pamamagitan ng isang koneksyon sa FTP. Sa ilang araw, ia-update ng search engine ang database at aalisin ang link sa iyong mapagkukunan mula sa mga resulta ng paghahanap.
Hakbang 2
Ang pinakatanyag na paraan sa mga webmaster upang maprotektahan ang isang site, ang mga indibidwal na seksyon o mga pahina mula sa pag-index, at sa gayon alisin ang mga link mula sa mga resulta ng paghahanap, ay i-edit ang robots.txt file.
Maaari mong isara ang isang hiwalay na pahina mula sa pag-index gamit ang code:
User-Agent: *
Payagan: /page.html (pagsasara ng pahina ng pahina.html)
Maraming mga tagubilin ng may-akda tungkol sa kung paano gumamit ng mga code para sa isang robots.txt file sa Internet.
Hakbang 3
Ang pangatlong paraan upang alisin ang mga pahina ng site mula sa mga search engine ay ang paggamit ng mga robots meta tag sa mga pahina nito. Ang tag ay nakasulat sa HTML code ng mga nakatagong mga pahina sa pagitan ng mga tag.
Samakatuwid, pagkatapos ng reindexing ng PS site, ang mga pahina na may meta tag na ito ay mahuhulog sa paghahanap. Ang kawalan ng pamamaraang ito ay maraming mga modernong site ang gumagamit ng mga template ng tpl, na nangangahulugang kailangan mong manu-manong baguhin ang code sa daan-daang, marahil libu-libong mga pahina.
Hakbang 4
Ang pang-apat na paraan upang alisin ang mga site mula sa mga search engine ay ang paggamit ng mga header ng X-Robots-Tag. Ang kakanyahan ng header na ito ay katulad ng paggamit ng nakaraang meta tag, gayunpaman, ang entry ay dapat na matatagpuan sa mga header ng
X-Robots-Tag: noindex, nofollow
Hakbang 5
Ang pinaka-mabisang paraan upang alisin ang isang website (ganap) mula sa mga search engine ay alisin ito mula sa panel ng webmaster. Matapos ang pag-update (3-7 araw), ang site ay hindi maa-access sa search engine. Magagamit ang panel ng webmaster para sa mga search engine na Yandex (https://webmaster.yandex.ru/delurl.xml) at Google (https://webmaster.yandex.ru/delurl.xml).
