Posted By: chomer () on 'CZwww'
Title: Jak poznat, co je robot?
Date: Mon Jun 14 18:53:50 2004
Zdravim!
Mam na jednech strankach logovani "UserAgent" a posledni
dobou mam pocit, ze velkou cast trafficu tvori ruzni boti.
Da se nejak jednoduse zjistit, co je a co neni robot? (pokud
to na sebe teda rekne). Myslim z logu, ne podle toho, jestli
se snazi najit robots.txt (potreboval bych to zpetne
a k logum z apache se pravdepodobne nedostanu).
Takze, nevite nekdo o nejaka databazi (zadarmo, pac ten
web je taky neziskovy)?
Diky!
Chomer
Hodlam vytmavovat.