Kako hitro prideta Googlebot in Slurp?

Noro hitro :) Vceraj zvecer sem objavil eno spletisce, do danes zjutraj je Googlebot ze naredit 62 zahtevkov, Slurp pa 12. Ni slabo :)

Toliko v informacijo tistim, ki sprasujete podobne zadeve ze nekaj casa...

56 odgovorov

Ena moja stran je bila poindexirana v približno 10 urah. Še bol nenavadno pa je to, da je nastrani samo napis " stran v izdelavi" in še en link do moje strani (A). Razjezilo pa me je to, da se je na ključno besedo, ki je drugače tudi domena (brez končnice) uvrstila nova stran (po celka 10 urah) na peto mesto od vrha, med tem, ko je bila moja stran A šele na 12 mestu. Sedaj sem sicer na to ključno besedo prvi, una stran pa še vedno na prvi strani (9). Pa mi razloži to logiko. Če ne bi šel iskati te ključne besede, sploh ne bi opazil, da je stran že bla poindexirana.

Nah ni slaba ideja :p, drugače pa ve kdo kako se google obnaša pri errorjih ? Očitno ne poindexira ... predvidevam da si imel default error page od strežnika ?

ne, imam narejeno eno stran, ki je "privzeta" in se avtomatično naloži za vsako novo domeni, ki jo usmerim na server.

nas-t1, za Vinija sem spraševal :D, drugače pa noindex, v glavo te strani, čeprav nisem točno razmel kaj si želel, vsekakor pa tvojo stran ki si jo sam naredil prepozna kot stran z vsebino in jo indexira če nimaš noindex, oz. verjetno še zazna error page. Tu me zanima, če samo privzete, al piše na strani 404 pa google že misli Not found ... na strani pa piše recimo: "Jutri bo 404 dni odkar ... bla bla ...". :D

Kaj ti ni jasno HeXeR? Rekel sem, da je zadeva vracala 403, kaj tukaj ni jasno?

vrjetno ne ve za kaj so response headerji :)

Lol, seveda ne, nekak me na šunko spominjajo.

Drugače pa, kaj pa če imam domeno, ki ima določene veljavne NSje, samo na DNS serverju ni vnešena, posledično tudi ne v virtualhostu. Potem lahko naredim isto kot Vini ? Prej nabiram linke, pol pa ko bo stran enkrat dosegljiva bo google takoj priletel ?

Drugo vprašanje, kaj pa poddomene ? Sploh če še ne obstajajo, gre enako ?

Spet govoris neumnosti... Kaksno posledicno zvezo imata zapis v DNSu in virtual host?

Vini, zanima me kaj se zgodi v tem primeru ? S strani googla seveda ...

HeXeR, razmisljaj malo... Kako bos nabiral linke na domeno, ki ne resolva nikamor? Kdo te bo pa linkal?