Versiune printabilă
In Google Webmaster Tools si asta fara sa fac nimic:
Adica pana acum i-a placut de viata mea si acum nu-i mai place sau care e ideea ?Citat:
Reţea imposibil de găsit: robots.txt imposibil de găsit
Nu am putut accesa cu crawlere sitemap-ul dvs. deoarece am găsit un fişier robots.txt în rădăcina site-ului dvs., dar nu l-am putut descărca. Vă rugăm să vă asiguraţi că acesta este accesibil sau eliminaţi-l complet.
Si eu patesc ceva de genul asta, generez fisierul html pentru verificare dar google nu-l vede, si e ciudat ca la alte site-uri hostate pe acelasi ip merge fara probleme. Sa fie oare ceva bug la webmaster tools?
Probleme la hosting temporare ?
Incarcare mare pe server, fisiere indiposinibile ?
Cron-uri care solicita serverul mult noaptea, si cand vine google nu poate accesa ?
Am patit si eu cu un site asa ceva, si nu a vrut sa mi-l vada pana cand nu am inserat acel rand meta in codul sursa ai site-ului.Citat:
Postat în original de dacian
daca scri in browser http:// www. site .ro /robots.txt iti afisaza continutul fisierului?
Nu... imi spune ca nu-l gaseste... doar nu l-oi fi sters din greseala... intru acum sa vad...Citat:
Postat în original de mariuslmm
pai si atunci cum vrei sa il gaseasca google. verifica daca este pe server, si daca este verifica daca are drepturi. atata timp cat nu e accesibil in browser nu e accesibil nici pentru google
n-am folosit pana acum robots.txt si n-au fost probleme... chiar nu inteleg de unde e problema... am verificat si alte site-uri la care n-am nici un robots.txt si e OK... site-ul e facut cu WordPress
pai din cate zice google acolo, vede acel fisier robots.txt dar nu il poate citi, si presupun ca deaia tia blocat si cel sitemap. eu zic ori sa elimini acel fisier robots, ori sa ii dai acces de citire.
Nu-l gasesc pe server acel fisier... ce mama masii doar nu-s nebun...Citat:
Postat în original de mariuslmm
pai atunci incearca sa il creezi.
fai un fisier robots.txt in care scri:
User-Agent: *
Allow: /
si pe urma dai din nou sa retrimita acel sitemap. vezi ca ai in webmastertool si sa verifice fisierul robots.txt
Parerea mea este ca e foarte important acel fisier. ar fi bine sa il ai pe siteuri
Pus robots.txt cu urmatorul continut
Schimbat si IP-ul site-ului, si Google imi afiseaza aceasi eroare...Citat:
User-agent: *
Allow: /
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Verificat si .htaccess, nu blocheaza accesul Google Bot... serverul de gazduire nu blocheaza nici el accesul Google Bot si totusi ceva se intampla...
Imi poate spune cineva ce anume se intampla ?
in webmastertool la instrumente poti sa faci analiza la acel robots.txt. Ce zice acolo?
dupa ce ai creeat acel fisier robots txt este accesibil in browser?
Am rezolvat problema... acel robots.txt in browser a fost accesibil imediat dar Google mi l-a vazut abia peste cateva zile...Citat:
Postat în original de mariuslmm
La mine a aparut o asemenea chestie cand un script mi-a generat un .htaccess tampit...