Kako blokirati Pogodak.hr bot (spider.pogodak.hr)?

Želim blokirati Pogodak.hr robota (spider.pogodak.hr i spider.najdi.si)

U uvjetima korištenja na svojim stranicama Pogodak ne navodi ime svog bota, a u Awstats nije izlistan među posjetima robota, pa neznam što staviti u robots.txt

User-agent: Pogodak.hr
Disallow: /

AFAIK ovisi o tome kako je na serveru konfiguriran awstats hoće li spider.pogodak.hr (i braća mu) biti izlistan u popisu robota ili posjetitelja.
A da ih blokiraš preko .htaccessa i IP adresa?

Jesam, blokirao sam s .htaccess ali mi se to čini ‘manje propisno’ od definiranja nedozvoljenih botova u robots.txt
Što se tiče Awstats - tamo imam niz nepoznatih botova prijavljenih samo kao ‘spider’ ili ‘crawler’ bez naziva, ali Pogodak ne vidim tamo (prepoznao bih ga po bandwidth-u).

 Order Deny,Allow
 Deny from spider.pogodak.hr
 Allow from all

Evo od ovih IP adresa neke su od pogodak, provjeri sa whois IP:

65.208.151.112,65.208.151.113,65.208.151.114,65.208.151.115,65.208.151.116,65.208.151.117,65.208.151.118,65.208.151.119,213.253.92.120,89.143.229.120,85.10.36.120,217.72.66.253,91.185.207.214,77.88.26.27

To su inače IP adrese koje ja blokiram na stranicama. Ima tu jos nekoliko opasnih (po bandwith) botova.

EDIT:Jednom sam im (pogodak) slao email pa su me zvali iz Slovenije i iskljucili sa skeniranja, jer sam tada imao neki mali hosting a pogodak je jeo bandwith.

Hvala, kopirat ću ove IP adrese, za sada mi samo Pogodak.hr stvara probleme.

Ove tri IP adrese sam iskopao (tvoje završavaju sa 120, a ove sa 110):
spider.pogodak.hr 89.143.229.110
spider.pogodak.hr 85.10.36.110
spider.pogodak.hr 213.253.92.110


Copyright © 2020 WM Forum - AboutContact - Sponsored by: Mydataknox & Webmaster.Ninja