Mám stránku, kterou nechci, aby vyhledávače indexovaly nebo procházely. Nejsem si jistý, zda bych měl do svého souboru robots.txt vložit, abych vyhledávacím strojům řekl, aby tuto stránku neprocházeli / neindexovali.
Samotná stránka se generuje dynamicky a nemá předdefinovanou šablonu, o které vím vše o své adrese URL, která je předdefinována a zůstane nezměněna.
Tuto stránku mám říct na
www.mysite.com/my-nonindexable-page/ Navrhněte, co bych měl udělat, abych toho dosáhl. Používám WordPress pro svůj web
Prostě řekněte všem (*) ne procházet URL:
User-agent: * Disallow: /my-nonindexable-page/