Stránky každého webu jsou pravidelně procházeny vyhledávacími roboty, kteří zpracovávají informace na webu tak, aby byly k dispozici na žádost uživatelů ve vyhledávačích. Návštěvy návštěvníků z vyhledávačů mají pozitivní vliv na provoz stránek a stimulují rozvoj zdroje. Pokud však na webu existují stránky, jejichž informace nejsou určeny pro internetové publikum (například osobní stránky uživatelů nebo registrační stránka), není přechod z vyhledávačů na tyto stránky nutný a je je lepší zakázat indexování těchto informací.
Nezbytné
- - mít svůj vlastní web
- - znát odkazy na stránky, jejichž indexování by mělo být zakázáno.
- - mít alespoň základní znalosti HTML
Instrukce
Krok 1
Chcete-li zabránit tomu, aby vyhledávací robot indexoval určité stránky webu, musíte provést změny v souboru robots.txt, pokud je již na vašem webu, nebo vytvořit tento soubor.
Krok 2
Pokud je soubor robots.txt již na web nahrán a je možné tento soubor upravit přímo z ovládacího panelu prostředků, otevřete soubor robots.txt prostřednictvím webové služby pro úpravy.
Krok 3
Pokud neexistuje žádný způsob, jak provést změny v požadovaném souboru přímo z ovládacího panelu, otevřete soubor robots.txt v prohlížeči kliknutím na odkaz na tento soubor. Zkopírujte všechna data ze stránky, která se otevře, a vložte je na list v Poznámkovém bloku.
Krok 4
Pokud na webu není žádný soubor robots.txt, otevřete program „Poznámkový blok“, v jehož novém dokumentu budete muset zadat potřebný kód.
Krok 5
Na prázdný list textového dokumentu napište první požadovaný řádek:
Uživatelský agent: *
Krok 6
Poté přejděte na další řádek stisknutím klávesy Enter a zadejte následující kód:
Disallow: / index / page3Dallow: označuje žádné indexování a / index / page3 je odkaz na stránku, kterou není třeba indexovat. Místo odkazu / indexu / stránky3 vložte odkaz na stránku svého webu, kterou chcete blokovat pro zpracování roboty.
Krok 7
Všimněte si, že na začátku odkazu chybí samotný název domény; jeho přítomnost v položce znamená lomítko. Při procházení webu vyhledávací robot automaticky vloží název domény do takových odkazů. Proto tímto způsobem zapisujte odkazy na potřebné stránky.
Krok 8
After Disallow: můžete umístit nejen odkaz na konkrétní stránku, ale také odkaz na jakoukoli sekci nebo adresář webu. Podobně můžete zakázat indexování požadované části webu.
Krok 9
Je-li nutné zakázat zpracování několika různých částí zdroje roboty, napište odkaz na každou sekci nebo stránku na nový řádek, na začátek kterého nezapomeňte vložit položku Disallow:.
Krok 10
Chcete-li dokončit změnu souboru robots.txt, klikněte při úpravě souboru na ovládacím panelu na tlačítko „Uložit“nebo uložte textový dokument s položkami pod názvem robots.txt a nahrajte tento soubor na web.
