Halos bawat webmaster ay sumusubok na i-optimize ang mga pahina ng kanyang site sa isang paraan upang makakuha ng maraming mga na-index na elemento hangga't maaari. Ngunit sa ilang mga kaso, sa kabaligtaran, kailangan mong itago ang ilang mga pahina, halimbawa, isang form para sa pagpasok ng data ng pagpaparehistro, pagkuha ng mga password, atbp.
Kailangan iyon
Pag-edit ng Robots.txt file
Panuto
Hakbang 1
Ang pinakamadaling paraan upang isara ang pag-index ng maraming mga seksyon o isang tukoy na buong site ay upang gawin ang mga naaangkop na mga entry sa robots.txt file. Ginagamit siya bilang gabay para sa mga search engine. Kapag ipinasok ang mga pahina ng site, ang robot ng paghahanap ay tumutukoy sa file na ito, kung wala ito, nai-index nito ang buong site, kung hindi man sumusunod ito sa mga rekomendasyong tinukoy sa file na ito.
Hakbang 2
Kung nilikha mo mismo ang iyong site, at wala kang isang application, sa anyo ng isang dokumento sa teksto na nagpapahiwatig ng mga pagbabawal, madali itong likhain ng iyong sarili. Magbukas ng isang bagong dokumento sa teksto, halimbawa, gamit ang programa ng Notepad. Ilagay ang mga sumusunod na linya sa katawan ng dokumento: User-agent: * Disallow: /file.htmlDisallow: / Directory /
Hakbang 3
Ngayon ay alamin natin kung ano ang tinanong mo sa search engine bilang isang gawain. Ang tanda na "*" sa tapat ng User-agent ay nangangahulugang ang tagubiling ito ay dapat na isagawa ng ganap na lahat ng mga file system. Halimbawa, kung sumulat ka ng "Yandex" sa halip na "*", ang apela na ito ay mababasa lamang ng robot ng search engine ng Yandex. Huwag payagan ang mga pahayag na nagbabawal sa pag-index ng isang tukoy na seksyon (direktoryo) o file (.html file).
Hakbang 4
Matapos maipon ang file ng robots.txt, maaari kang direktang pumunta sa mga teksto sa mga pahina ng site. Tulad ng alam mo, ang mga search engine ay hindi gusto ang pagkakaroon ng higit sa 3 panlabas na aktibong mga link sa iyong mga pahina. Paano kung kailangan mo ng nosebleed ngunit mag-post ng 5 o higit pang mga link. Sa mga kasong ito, maaari kang gumamit ng isang katangian o isang tag.
Hakbang 5
Upang isara ang mga link mula sa pag-index ng search engine ng Google, kailangan mong dalhin ang link sa sumusunod na form: mga link ng anchor. Ang katawan ng katangian ay dapat na ipasok sa anumang bahagi ng link, hindi nakakalimutang paghiwalayin ito ng isang puwang, ibig sabihin ang katangian ay maaaring mailagay sa pagitan ng "a" at "href" o sa pagitan ng link at ng anchor nito.
Hakbang 6
Upang isara ang mga link mula sa pag-index ng search engine ng Yandex, kailangan mong dalhin ang link sa sumusunod na form: link ng anchor. Ang tag ay nakalagay sa simula at sa dulo ng link. Huwag kalimutan na ang tag na ito ay ipinares: ang pangalawang bahagi, hindi katulad ng una, ay may kasamang tanda na "/".
