Die bladsye van elke werf word gereeld deur soekrobotte deursoek, wat die inligting op die webwerf verwerk sodat dit op versoek van gebruikers in soekenjins beskikbaar is. Besoeke van soekenjins het 'n positiewe uitwerking op die werfverkeer en stimuleer die ontwikkeling van die bron. Maar as daar bladsye op die webwerf is, waarvan die inligting nie vir die internetgehoor bedoel is nie (byvoorbeeld die persoonlike bladsye van gebruikers of die registrasiebladsy), is die oorgang van soekenjins na sulke bladsye nie nodig nie en dit is is beter om hierdie inligting te indekseer.
Nodig
- - het u eie webwerf
- - om die skakels na die bladsye te ken, waarvan die indeksering verbode moet wees.
- - ten minste basiese kennis van HTML hê
Instruksies
Stap 1
Om te verhoed dat die soekrobot sekere bladsye op die werf indekseer, moet u die robots.txt-lêer verander, as dit reeds op u webwerf is, of hierdie lêer moet skep.
Stap 2
As die robots.txt-lêer reeds na die webwerf gelaai is en dit moontlik is om hierdie lêer direk vanaf die hulpbronbeheerpaneel te wysig, open dan robots.txt via die webdiens vir redigering.
Stap 3
As daar geen manier is om die gewenste lêer direk vanaf die bedieningspaneel te verander nie, open dan robots.txt in 'n blaaier deur op die skakel na hierdie lêer te klik. Kopieer al die data van die bladsy wat oopgaan en plak dit op die vel in die Kladblok.
Stap 4
As daar geen robots.txt op die webwerf is nie, open die "Notepad" -program, in die nuwe dokument waarvan u die nodige kode moet invoer.
Stap 5
Skryf die eerste vereiste reël op 'n leë vel teksdokument:
Gebruikersagent: *
Stap 6
Gaan dan na die volgende reël deur op die Enter-sleutel te druk en tik die volgende kode:
Disallow: / index / page3 Disallow: dui op geen indeksering nie, en / index / page3 is 'n skakel na 'n bladsy wat nie geïndekseer hoef te word nie. In plaas van die skakel / indeks / bladsy 3, plaas 'n skakel na die bladsy van u webwerf wat u wil blokkeer vir verwerking deur robots.
Stap 7
Let op dat die domeinnaam self aan die begin van die skakel ontbreek; die teenwoordigheid daarvan in die inskrywing impliseer die voorwaartse skuinsstreep. Wanneer 'n webwerf deurkruip, voeg 'n soekrobot outomaties 'n domeinnaam in sulke skakels in. Skryf dus op hierdie manier skakels na die nodige bladsye.
Stap 8
Na Disallow: u kan nie net 'n skakel na 'n spesifieke bladsy plaas nie, maar ook 'n skakel na enige afdeling of gids op die webwerf. U kan ook die indeksering van die gewenste deel van die webwerf verbied.
Stap 9
As dit nodig is om verwerking deur robots van verskillende afdelings van die bron te verbied, skryf 'n skakel na elke afdeling of bladsy op 'n nuwe reël, en vergeet nie om die Disallow: -invoer aan die begin te plaas nie.
Stap 10
Om die veranderende robots.txt te voltooi, klik op die "Save" -knoppie terwyl u die lêer in die beheerpaneel redigeer, of stoor 'n teksdokument met inskrywings onder die naam robots.txt en laai hierdie lêer op die webwerf.
