Volba

Nejsem si jistý, zda mám do svého souboru robots.txt přidat zásady ochrany osobních údajů svého webu nebo ne. Chci dodržovat správnou praxi SEO. Nemám důvod skrýt své zásady ochrany osobních údajů.

Argumenty proti: Chci být viditelný a ne vidět, že skrývám legální stránky. Je to nepravděpodobné, ale někteří uživatelé by to mohli skutečně chtít najít ve vyhledávači.

Argumenty pro: právníci / právníci mají tendenci tyto dokumenty opakovaně používat, takže text, který mi byl dodán, nemusí být jedinečný. Tato stránka ve skutečnosti není ta, která je pro lidi důležitá, aby na ni přistáli z vyhledávače.

Nějaká rada?

  • Viz také: Pomocí souboru robots.txt zabráníte tomu, aby Google procházel a indexoval zásady ochrany osobních údajů, podmínky a záruky a záruky

Vaše argumenty proti neblokování indexování těchto legálních stránek jsou platné. Matt Cuts zde v roce 2009 natočil video o tomto tématu:

https://www.youtube.com/watch?v=unEML5n5vTo

I když to není jasné „ano“ nebo „ne“ od Googlu, druhou důležitou otázkou je „jsou tyto stránky důležité pro mé uživatele?“. Pokud ano, Google je musí najít.

Na základě našeho výzkumu, který jsme o tomto tématu napsali na našem blogu, zjistíme, že se jedná o běžné právní stránky. Google ví, že tyto zásady jsou vyžadovány zákonem, že legální stránky nejsou obsahově bohaté a že na těchto stránkách pravděpodobně budete mít podobný obsah jako jiné weby.

Pokud se rozhodnete zablokovat indexování těchto stránek, použijte meta robots místo značky robots.txt:

<meta name='robots' content='noindex, nofollow' />

Jakákoli chyba v robots.txt může Google odindexovat celý váš web. The meta robots tag je bezpečná volba, jak to spravovat.

  • Zašel bych tak daleko, že bych řekl, že Google očekává, že tyto stránky najde na vysoce kvalitních webech. Měli byste povolit procházení a indexování těchto právních dokumentů, protože Google již ví, jak s nimi zacházet, a jsou kvalitním signálem.
  • Malý bod: chyba v robots.txt může zabránit tomu, aby byl celý váš web plazil se, ale samo o sobě nezíská indexování webu. Důležitý rozdíl.

Nepoužívejte jakékoli odkazy na stránku ochrany osobních údajů nebo podmínek v souboru robots.txt. Nejlepším SEO postupem by bylo vytvořit meta roboty s noindex, nofollow instrukcemi v sekci head takto:

<meta name='robots' content='noindex,nofollow'> 

Vaše stránka ochrany osobních údajů tak nebude indexována.

Tuto stránku musíte zpřístupnit uživateli vytvořením interního odkazu v zápatí. Tímto způsobem budou vyhledávače schopny najít také stránku a poté najít pokyny noindex, nofollow.

Můžete použít i jiné přístupy, ale pro mě je nejlepší. Zajistěte, aby váš web byl vždy procházitelný, a pomocí souboru robotů zajistěte sebe a ostatní procházení zdrojů.

  • Pokud je to „noindex, nofollow“, proč to nevložit do souboru robots.txt? Bylo by dobré pochopit důvod.
  • Soubor robotů @keith nezaručuje, že se stránky nebudou indexovat. Pokud nějaký jiný zdroj odkazuje na konkrétní stránku, mohla by se tato stránka stále indexovat. Pro mě je lepší použít jej k nastavení pravidel, aby se zabránilo robotům procházet složky, konkrétní vzory adres URL, autorizovat pouze části webových stránek atd. Někdy roboti mohou nebo nemusí respektovat jeho pokyny, jiní tvrdí, že je to archaické. Jak jsem řekl, použijte jej k uložení robotů nějakou práci a pro větší weby k uložení určité šířky pásma nebo serverových prostředků.
  • Díky, že to dává velký smysl (hlasoval jsem, protože to bylo velmi užitečné).
  • @keith žádné starosti Jsem rád, že jsem mohl vyjasnit, proč používat metaznačku :)

Pracoval pro vás: Charles Robertson | Chcete nás kontaktovat?