Ang mga pahina ng bawat site ay regular na na-crawl ng mga robot sa paghahanap, na pinoproseso ang impormasyon sa site upang magamit ito sa kahilingan ng mga gumagamit sa mga search engine. Ang mga pagbisita ng mga bisita mula sa mga search engine ay may positibong epekto sa trapiko ng site at pasiglahin ang pag-unlad ng mapagkukunan. Ngunit, kung may mga pahina sa site, ang impormasyon na kung saan ay hindi inilaan para sa madla ng Internet (halimbawa, ang mga personal na pahina ng mga gumagamit o ang pahina ng pagpaparehistro), kung gayon ang paglipat mula sa mga search engine patungo sa mga naturang pahina ay hindi kinakailangan at ito mas mahusay na ipagbawal ang impormasyong ito mula sa pag-index.
Kailangan
- - magkaroon ng sarili mong website
- - upang malaman ang mga link sa mga pahina, na dapat ipagbawal ang pag-index.
- - magkaroon ng hindi bababa sa pangunahing kaalaman sa HTML
Panuto
Hakbang 1
Upang mapigilan ang search robot mula sa pag-index ng ilang mga pahina ng site, kailangan mong gumawa ng mga pagbabago sa robots.txt file, kung nasa iyong site na ito, o lumikha ng file na ito.
Hakbang 2
Kung ang robots.txt file ay na-upload na sa site at posible na mai-edit ang file na ito nang direkta mula sa control panel ng mapagkukunan, pagkatapos buksan ang robots.txt sa pamamagitan ng serbisyo sa web para sa pag-edit.
Hakbang 3
Kung walang paraan upang gumawa ng mga pagbabago sa nais na file nang direkta mula sa control panel, pagkatapos buksan ang robots.txt sa isang browser sa pamamagitan ng pag-click sa link sa file na ito. Kopyahin ang lahat ng data mula sa pahina na bubukas at i-paste ito sa sheet sa Notepad.
Hakbang 4
Kung walang robots.txt sa site, buksan ang program na "Notepad", sa bagong dokumento kung saan kakailanganin mong ipasok ang kinakailangang code.
Hakbang 5
Sa isang blangko sheet ng dokumento ng teksto, isulat ang unang kinakailangang linya:
User-agent: *
Hakbang 6
Pagkatapos ay pumunta sa susunod na linya sa pamamagitan ng pagpindot sa Enter key at i-type ang sumusunod na code:
Huwag payagan: / index / page3Disallow: hindi nagpapahiwatig ng pag-index, at / index / page3 ay isang link sa isang pahina na hindi kailangang ma-index. Sa halip na ang link / index / page3, maglagay ng isang link sa pahina ng iyong site na nais mong harangan para sa pagproseso ng mga robot.
Hakbang 7
Tandaan na ang domain name mismo ay nawawala sa simula ng link; ang pagkakaroon nito sa entry ay nagpapahiwatig ng forward slash. Kapag nag-crawl ng isang site, awtomatikong nagsisingit ang isang robot ng isang pangalan ng domain sa mga naturang link. Samakatuwid, magsulat ng mga link sa mga kinakailangang pahina sa ganitong paraan.
Hakbang 8
Pagkatapos ng Payagan: maaari kang maglagay hindi lamang isang link sa isang tukoy na pahina, ngunit isang link din sa anumang seksyon o direktoryo ng site. Katulad nito, maaari mong pagbawalan ang pag-index ng nais na bahagi ng site.
Hakbang 9
Kung kinakailangan na pagbawalan ang pagproseso ng mga robot ng maraming magkakaibang seksyon ng mapagkukunan, sumulat ng isang link sa bawat seksyon o pahina sa isang bagong linya, sa simula nito ay huwag kalimutang ilagay ang Disallow: entry.
Hakbang 10
Upang makumpleto ang pagbabago ng robots.txt, i-click ang pindutang "I-save" habang ini-edit ang file sa control panel, o i-save ang isang dokumento sa teksto na may mga entry sa ilalim ng pangalang robots.txt at i-upload ang file na ito sa site.
