-
curiozitate
Am un sit ... Lucram la o design imbunatatit pentru acest sit si am incarcat totul pe server intr-un director /new pentru testari. Cand intru astazi pe Google webmaster tools pentru a mai vedea statisticile ... vad ca imi aparea o eroare la sectiunea "Web Crawl errors", nu-mi gasea nush ce fisier.
Asa am observat ca Google a indexat 9 din paginile sitului neterminat aflat in directorul /new cu toate ca nu avea nici o legatura de pe situl curent. Nu-mi explic cum a ajuns acolo? Doar nu m-a spionat pe mine in timp ce testat ? :D
Care ar fi explicatia? Cum a ajuns acolo, in /new ne-avand nici un link spre acel director de nicaieri ?
-
Despre Robots.txt
Daca le-ai lasat "usa deschisa" ei "navalesc" si "te toarna".
-
"ma toarna" :) :)
singura problema e ca acum voi avea "dublicate content", avand in vedere ca unele pagini aveau acelasi continut ca paginile din situl curent. :(
Sper sa "le uite" cat mai repede ;)