Zdravim!
Chcel by som zakazat vsetkym vyhladavacom indexovat vsetky podstranky v administracii. Pouzivam na to textovy subor robots.txt umiestneny v korenovom adresari s nasledovnym obsahom:
# All robots are welcome here
User-agent: *
Disallow: /zakazanypriecinok
Avsak aj po mesiaci sa stale zobrazuju vysledky, ktore si nezelam...Kde robim chybu ? Myslim si, ze existuje aj lepsi sposob ako dosiahnut, co chcem. Rad si necham poradit.
Ak už raz robot niečo zindexuje, tak si to pamätá. To že si to dodatočne zakázal je síce pekné, ale z výsledkov vyhľadávania to neodstáni. Cez google webmaster tools sa dajú odstrániť stránky z obsahu vyhľadávania, ale chvílu to trvá. Tiež odporúčam chrániť ten zakazanypriecinok nejakým menom a heslom aspon cez .htaccess súbor.
manager666 napísal:Zdravim!
Chcel by som zakazat vsetkym vyhladavacom indexovat vsetky podstranky v administracii. Pouzivam na to textovy subor robots.txt umiestneny v korenovom adresari s nasledovnym obsahom:
# All robots are welcome here
User-agent: *
Disallow: /zakazanypriecinok
Avsak aj po mesiaci sa stale zobrazuju vysledky, ktore si nezelam...Kde robim chybu ? Myslim si, ze existuje aj lepsi sposob ako dosiahnut, co chcem. Rad si necham poradit.
Thanks for reply
to je iba na robotovi ci dany priecinok v robots.txt bude ignorovat ale moze to sluzit ako aj zdroj pre rozne crawlery