Posted By: chomer () on 'CZwww'
Title:     Jak poznat, co je robot?
Date:      Mon Jun 14 18:53:50 2004


Zdravim!

Mam na jednech strankach logovani "UserAgent" a posledni
dobou mam pocit, ze velkou cast trafficu tvori ruzni boti.

Da se nejak jednoduse zjistit, co je a co neni robot? (pokud
to na sebe teda rekne). Myslim z logu, ne podle toho, jestli
se snazi najit robots.txt (potreboval bych to zpetne
a k logum z apache se pravdepodobne nedostanu).

Takze, nevite nekdo o nejaka databazi (zadarmo, pac ten
web je taky neziskovy)?

Diky!

Chomer

                                                 Hodlam vytmavovat.

Search the boards