15.10.2021 10:41
1
Zdravím

Chtěl bych se zeptat, jak mohu vypnout indexování webu na všech vyhledávačích (Seznam, Google).
Zkrátka aby byl web neviditelný pro vyhledáváče a roboty. A fungoval přístup pouze po sdílení webové adresy.

Jednoduše řečeno - chci aby byla stránka neviditelná na webu a po zadání její adres či jakéhokoliv klíčového slova, které se na webu nachází nechci aby se dala vyhledat na Googlu nebo Seznamu.

Lze to nějak upravit příkazy přes robots apod. ? Případně jak.
Děkuji
15.10.2021 10:44
2
Na všech stránkách dej do hlavičky noindex. Důležitý je, abys je neblokoval v robots, protože robots není určenej k zákazu indexace. Ty chceš aby tam vyhledávače přišly a dostaly tu informaci o noindexu. Se zákazem v robots tu direktivu noindex neuvidí a můžeš se tak do indexu klidně dostat odkazem z externího zdroje.
15.10.2021 11:14
3
záleží na účelu, můžeš také přímo v htaccess odepřít přístup robotům na web úplně (platí pro ty slušné), přihlašovací stránka je pak něco co odřízne i ty neslušné, ale samozřejmě to komplikuje přístup uživatelů. Noindex v hlavičce webu ale funguje pouze pro html obsah, pořád vyhledávače mohou indexovat obrázky, pdf dokumenty a jiný nehtml obsah, na to funguje jen http hlavička X-Robots: noindex,nofollow, lze to nastavit v htaccess pro všechny stránky vč. např. pdf dokumentů, to dělám u interních webů automaticky.

Nezabrání to ale indexaci odkazů na tebe, takže pokud někdo poskytne odkaz s popisem, který máš na stránce, vyhledávače ho tak i zaindexují, na to relativně slušně funguje prostě htaccess pravidlo a vracet chybné http odpovědi a vyhledávače tam nepustit, pak mají i menší ochotu takové odkazy indexovat a házet do serpu (nemám k tomu ale čísla).
15.10.2021 12:09
4
TomášX: A jak bude vypadat výsledný kód pro htaccess pro zákaz indexování html obsahu a obrázku. Děkuji
15.10.2021 12:38
5
Header always set X-Robots-Tag "noindex,nofollow"
15.10.2021 14:14
6
díky !
15.10.2021 17:59
7
Mi na některých webech (nových) "noindex,nofollow" nefunguje.
Pokud se něco nezměnilo "noindex,nofollow" je jen přání a druhá strana se rozhoduje zda bude indexovat.
Přes htaccess odepřít přístup robotům bude lepším krokem.
15.10.2021 18:01
8
Ne, noindex,nofollow rozhodně není přání, je to direktiva.
15.10.2021 19:21
9
A nestačilo by to pomocí robots protože ten mám přimo v administraci a stačí tam vyplnit data. Případěn co napsat zde. Díky
15.10.2021 19:38
10
Ne, robots není spolehlivý, protože k zákazu indexace prostě není určený. Tím, že v robots zakážeš přístup robotům nezabráníš možnosti indexace. Takže jediná varianta je ta co jsme navrhli s Tomášem. O jaké administraci píšeš vlastně? Nemáš tam prostě možnost indexaci zakázat? To je nějaké CMS?
15.10.2021 20:38
11
Tak tedy použiju ten .htaccess :-)

Takto ?

15.10.2021 21:34
12
Ano. Funkci si pak snadno otestuješ v prohlížeči s nějakým crawlerem nebo pluginem na metadata, třeba Meta SEO Inspectorem, Detailed SEO Extensionem a tak podobně.