| Scraper / spammer software | ||
|---|---|---|
|
zeko
29. dec 2016 18:07:28
Pridružen od: 26. feb 2010 2680 objav 3522 839 122 |
#11
Kaj pa predlagas? Cloudbased service?Vsak tool lahko sluzi svojemu namenu, nekaterim bolje nekaterim slabse. uBota ne poznam dobro, imacros je pa kar se mene tice en lazji toolov za uporabo (ce odmislim nekatere cloudbased drage zadeve) noobiliate & bizarre domain name collector
|
|
|
Lombi
30. dec 2016 13:27:39
Pridružen od: 7. jun 2008 445 objav 315 9 7 |
#12
Imam licenco za prva dva. Najprej bi rad dodal, da ima ubot centralizirano bazo komand za znane cmsje / znane strani, tako da imas dosti manj dela s tem. Zagotovo je ubot najblizje pokritju vsem stvarem, ki si jih napisal, imas pa majhen learning curve. Enako pri zenno posterju ali imacros. Ampak ce ti je kolikor toliko jasen "flow" programskega jezika, potem zelo hitro zapopades. Za alerte je pa verjetno boljsi kak servis ala Google Alerts in podobni. |
|
|
Lombi
30. dec 2016 13:38:51
Pridružen od: 7. jun 2008 445 objav 315 9 7 |
#13
Compiler je samo v developer verziji in je namenjen temu, da svoj projekt delis/prodajas. S tem koncni uporabnik ne potrebuje ubot licence. Ce tega ne zelis, ne generiras exe ampak direktno zaganjas kodo. Primerljivih orodij (node/codebased programski jezik, kompletna kontrola nad chromium, multithreading, regex, os integracija, razsirljivost preko pluginov, ) zastonj ni. |
|
|
Street-smarts
30. dec 2016 15:50:15
Pridružen od: 30. avg 2011 618 objav 510 23 1 |
#14
Če hočeš ubrat res zastonjsko pot (katera pa kot kompromis zahteva ogromno dodatnega dela), potem je opcija tudi, da s poljubnim programskih jezikom napišeš skripto za upravljanje browserja (Selenium je en tak library, ki je na volju v pythonu, rubyju, c, javascriptu...) Iz izkušenj pa povem, da se je s tem potrebno kar precej igračkat, saj včasih integrirane metode za zaznavo elementov na strani (detect by anchor name, css name, unique selector) včasih ne delajo kot bi morale, in je včasih potrebno poskusiti več načinov, da najdeš metodo, ki ti ga zazna. Unique selector ni vedno rešitev. Druga stvar, ki se je pri tem potrebno zavedati je, da boš s custom rešitvami kdaj pa kdaj svoje skripte moral posodabljati, npr. ko platforma, ki jo targetiraš, spremeni svoj CMS, ridizanja page... ampak ta ista konsideracija pride v poštev tudi pri Ubotu in podobnih orodjih. Bottom line: tako Ubot kot custom skripta zahtevata ogromno custom dela in potencialno vzdrževanje. Bi si pa upal stavit, da te bo Ubot definitivno do cilja pripeljal hitreje. Tako da je čisto odvisno od obsežnosti projekta. Če imaš za avtomatizirat, kajazvem, max 5 pagov, potem idi s custom skripto, ker tudi dela ne bo preveč. Če je tega na 50, 100... potem Ubot. |
|