Ne zelim da mi botovi trazilica google etc. indexiraju pojedinu stranicu i podstranicu.
Kako to mogu to rijesiti?
Sad si me podsetio na one početničke stvari 
webmastera, Pa da ti pomognem malo
noindex i disallow sprečava pojavljivanje stranica u indeksu,
za konkretno gogolebot:
User-Agent: Googlebot
Disallow: /na-primer-ime strane-koju želiš da neindeksiraš/
ili za google mobile indeksiranje
User-agent: Googlebot-Mobile
Disallow: /na-primer-ime strane-koju želiš da ne indeksiraš/
Meta Robots tag se piše na više načina, u zavisnosti od potreba:
ovo je za blokiranje većine robota
<meta name="robots" content="noindex"> da ne indeksira stranice
< meta name="robots" content="noindex,nofollow" /> ne indexiraj linkove i ne prikazuj u pretrazi;
< meta name="robots" content="noindex,follow" /> ne prikazuj u pretrazi ali indexiraj linkove;
< meta name="robots" content="index,nofollow" /> prikazuj u pretrazi ali ne indexiraj linkove;
za blokiranje celog sadržaja za googlebot se piše ovako:
<meta name=”googlebot” content=”noindex”>
uglavnom navedeš ime nekog robota za kojeg ne želiš da pristupa linku ili sadržaju
User-agent: (pa ime tog robota)
Disallow: (koju stranicu da ne prati)
2 Likeova
A ono radim za sebe tako jednostavnije stvari koje su mi potrebne ako nesto nisam siguran uzmem gotov template pa ga modificiram.
Neke stvari jos ne znam pa mi je bolje pitati ali dosta toga znam od adroid aplikacija (jednostavnih) i tako to
1 Like