Naj povem da kdorkoli je vsaj malo v tej sferi, da pozna administracijo strežnikov in tuje ponudnike, ter je lastnik kolikor toliko velike spletne strani, ve da tuji ponudniki niti približno ne pridejo v poštev za resno gostovanje. Razlogi so različni, vendar večina ljudi prehitro podleže nizkim cenam gostovanja. Če imaš stran z 15mb, nič prenosa, nič queryev v bazo, 5 obiska na dan, ti jo lahko gostuje kdorkoli za manj kot 1€ na mesec. Kdorkoli. Čim pa se tvoja stran malce zraste, nastanejo problemi. Ne-bi govoril, ker je brezveze zgubljati besede, saj morate do tega priti sami. Sam sem glavni administrator enega izmed ponudnikov gostovanja v Sloveniji in lahko vam rečem da lahko postavim še nižjo ceno kot jo ponujajo v tujini, če pripeljete veliko takih strani, ki ne bremenijo strežnik. Tu apeliram na to, da ne podcenjujte Slovenskih ponudnikov gostovanja, čeprav se zdijo cene mogoče malce višje na prvi pogled. Ne bom omenjal svojega strežnika da me ne boste narobe razumeli, da sebi delam reklamo. Na splošno pa vam raje povem, saj sem videl že ogromno ljudi ki so prišli do mene ali sem jih slišal kje drugje, kakšne probleme imajo v tujini z gostovanjem. Tudi sam sem bil enkrat žrtev, ko je firmo, ki je uspešno poslovala 6 let v Ameriki, čez noč požrlo drugo podjetje. Čez slab mesec sem dobil ušivo 54kbit linijo, da sem si lahko presnel vsaj glavni del podatkov (okrog 50GB...)... Pa še to sem imel srečo, da sem bil tako siten in nisem prenehal težiti... Toliko v vednost.

Trenutno pišem oz. imam že tako rekoč delujoč multithreading crawler (na 30 sekund prebrska okrog 1000 različnih spletnih strani /verjetno se da to še dosti izboljšati/), ki pobira emaile iz slovenskih spletnih strani. Za glavni vir uporablja iskalnike kot so najdi.si, google.com in podobne. Princip je v tem, da crawler pošlje ključno besedo na iskalnik, za katero bi si nekdo želel emaile. Nato prebrska vse linke, ki jih iskalniki podajo. Poveže se na spletne strani in pobere kontaktne emaile z njih. Seveda tu ne gre le za emaile, možnosti je več kot dovolj, za kar bi crawlerja lahko uporabljali. Zanima me, če je kdo interesiran za take email liste po kategorijah/ključnih besedah. Seveda me ne zanima v kakšne namene potrebujete te emaile, niti me ne zanima kaj boste s temi listami naredili, komu bi pa mogoče prišle prav.

Pravi razlog zakaj sem se spravil pisat tega crawlerja je v bistvu le to, da malce potreniram niti (threadi), poleg tega pa da testiram kje so meje zmožnosti različnih strežnikov, kako hitro in koliko strani lahko procesirajo.