Robotki
4 naročniki
4 naročniki
Tako, imam eno vprašanje.
Kako bi naj delovala skripta ki bi služila kot tole recimo klik oziroba mod je tale: http://www.zdziarski.com/projects/mod_evasive/ . Vendar bi jaz zadevico uredil s PHP.
Sedaj ok, beležiš pač koliko zahtevkov pride v določenem času, pa potem če je preveč vržeš recimo sleep(20) pa chaptcho če želi nadaljevati.
Ampak če bi to pobralo tudi google, yahoo in msn. Ter predvsem ostale crawlerje ki so malo bolj primitivni in zato bolj neprijazni strežniku, potem nebi bil poindexiran ... tega pa ne želim.
Rešitev bi bila mogoče seznam vseh crawlerjev, pa mi to ni nekako, še kaka druga rešitev ? Oz. če ve kdo v detajle kako deluje mod_evasive ?
7 odgovorov
SpinX, a bi lahko link prosim dal, al pa kaj več povedal ? Google meče vem Yet Another Linux Theme :(.
:)
Nah niti ne, rad bi samo preprečil da mi nek botek skopira celo vsebino strani, če že naj to dela počasi, 100% preprečiti tako nemorem.
Skratka isto zadevo kot mod_evasive potrebujem, le da v PHP & MySql spisano, še raje pa bi to sam naredil zato me zanima kako približno dleuje zadeva, kaj vse se upošteva.
frisby :) ne bos verjel, ampak tukaj sem se vzdrzal komentarja in se bom se vnaprej... ocitno ne zalezejo :P