Versiune printabilă
Salutare,
Am lansat un website zilele trecute si nu imi accepta sitemap-ul in Google Webmaster Tools, primesc mesajul: URL restricted by robots.txt . Am incercat 2-3 pluginuri si toate metodele gasite pe Google, any suggestion?
Mentionez ca website-ul a fost blocat "Discourage search engines from indexing this site" pentru cateva luni.
Ce site ? (daca nu vrei sa-l publici, trimite pm)
Este vorba despre dacato . ro .
Update, acum imi vede sitemap-urile dar imi da eroare pentru link-uri:
https://nimbus.everhelper.me/client/...bXkzqKiTfXTQ7/
Mentionez ca url-urile nu sunt blocate in robots.txt
anumiti boti sunt blocati de robots.txt
scoate balariile alea din robots.txt
lasa doar:
User-agent: *
Disallow: /wp-admin/
Allow: /
Ai undeva in setari o chestiune de genul "descurajeaza moroarele de cautare....". Daca ai avut-o bifata cat a fost site-ul in lucru sau daca tot atunci ai avut restrictii in robots.txt, de acolo ti se trage. De obicei trece in cateva zile...
Da, asa este. Am rezolvat cu metoda lui RedJohn, nu situ de ce nu m-am gandit asta.
Multumesc mult pentru ajutor.
Salut.
Am si eu o intrebare legata de sitemap si o postez tot aici ca sa nu mai deschid alt topic.
Am un sitemap generat de pluginul de la Yoast.
In "robots.txt" am o singura linie si anume:
"User-agent: *
Disallow: /*?*"
din ce am citit am inteles ca este mai bine sa nu se indexeze cautarile pe blog.
Cu toate astea, in webmaster tools la sitemap primesc un avertisment si anume "Sitemapul conţine adrese URL blocate de robots.txt." si un numar de 757 de probleme. Am crezut ca problema ar putea fi generata de semnul "?" care apare in numele imaginilor din drafturi, nepublicate inca. Insa daca intru in sitemap si caut manual dupa "?" imi apar doar 8 attach-uri cu probleme nicidecum 700. Din ce am vazut, numarul acesta creste.
Ma puteti va rog ajuta cu niste sugestii?
Multumesc.
Salut,
Zici ca folosesti plugin-ul Yoast. Vezi ca pe la setri are parca o optiune sa nu indexeze cautarile. Deci chestia aia din robots.txt poti s-o stergi dupa ce bifezi acolo...
Avertismentul din webmaster tools este normal. Tu i-ai spus sa nu acceseze paginile cu un anumit pattern (nu stiu cat de bun este) iar el iti spune ca i-ai restrictionat accesul la un numar de x pagini, cel mai probabil cele al caror url indeplineste acel pattern. Deci care e problema in fond? Nu e absolut nici o problema...
Merci frumos de raspuns Mishu, raspunsul tau m-a ajutat sa-mi dau seama unde e buba si sa o rezolv.
Salut. Îmi poți spune și mie cum ai rezolvat? Aceeași problemă m-a întâmpinat și pe mine. Trimit fișierul robots.txt către cei de la Google, dar nicio schimbareCitat:
Postat în original de Infrasunete
Cel pe care-l trimit arată așa:
User-agent: *
Disallow: /wp-admin/
Allow: /
Sitemap: domeniu.ro*-*domain registration Resources and Information.
Iar cel vechi, așa:
User-agent: *
Disallow: /
Am retrimis către ei de 10 ori, cel puțin, dar niciun rezultat. Bănuiesc că din această cauză am și eroarea la sitemaps: URL restricționat de robots.txt
O idee de rezolvare, vă rog?
Mulțumesc,
In setari la Afisare (parca) sa nu ai bifata optiunea "Descurajează motoarele de căutare să indexeze acest sit".Cod:Sitemap: link/sitemap.xml
User-agent: *
Disallow: /wp-admin/
Mai departe asteptare.