erori in W.T si picaj in serp

Salut. Am o problema destul de serioasa cu blogul. Pe 16 noiembrie blogul a suferit o pierdere masiva de trafic, mai putin de jumatate. Vezi imaginea: http://i.imgur.com/hgVVq.png

Doar presupun ca a fost Panda.. am gasit 5 articole duplicat pe blog..nu stiu cum a fost posibil asa ceva. Precizez ca am avut ceva probleme cu vechiul host, iar in prima saptamana a lunii noiembrie am schimbat hostul si incepusem sa prind ceva avant doar ca pe 16 s-a rupt "craca".

Mesaje in Webmaster:

2.11.2012: http://mystreet7.com Increase in authorization permission errors

Google detected a significant increase in the number of URLs we were blocked from crawling due to authorization permission errors.

11.11.2012: Googlebot can't access your site
Over the last 24 hours, Googlebot encountered 42 errors while attempting to connect to your site. Your site's overall connection failure rate is 10.6%.

Dar culmea ca pe 11 am avut cel mai mare trafic de cand am blogul, apoi a scazut foarte putin, ramanand constant pana pe 16.

Astazi, 26 noiembrie gases in Webmaster Tools:
Acces refuzat - Googlebot nu a putut accesa cu crawlere adresa dvs. URL, deoarece serverul dvs. solicită date de conectare pentru accesarea paginii sau împiedică Googlebot să acceseze site-ul dvs.
http://mystreet7.com/wp-app.php/service

Odata accesat link-ul, primesc: AtomPub services are disabled on this site.

Consecinte:
1. trafic la pamant
2. in fiecare zi pierd teren in serp chiar cu articole care nu au mare concurenta pe keyword-urile respective..sau ma rog..am copiat un titlu de articol in google si culmea ca eram pe locul 2 dupa ce am fost pe primul loc foarte mult timp..iar primul rezultat nu este relevant. Vezi "stocarea parolelor pe internet"
3. tind sa fiu exclus din serp.

Orice sfat este binevenit. Multumesc anticipat.

De ce ai disabled wp-includes in robots.txt ?

Citat:

---

Postat în original de puthre

De ce ai disabled wp-includes in robots.txt ?

---

Asa era, nu am umblat in robots.txt. Sa sterg linia?

1. Ai putin content above the fold (prea multe reclame in zona respectiva).
2. Related posts (cu thumb) din partea de jos fac un redirect dubios cand dai click pe ele in loc sa fie link direct. Cred ca vizitele ti le contorizeaza ca si refferal in analytics.
3. Ai cam multi "fani" Google plus. Sigur nu e ceva artificial?

Cod:

---

http://widget6.linkwithin.com/redirect?url=http%3A//mystreet7.com/windows-7-2/check-disk.html&vars=%5B%22http%3A//mystreet7.com/internet/cum-sunt-parolele-stocate-pe-internet-conteaza-parola-puternica.html%22%2C%201420295%2C%200%2C%20%22http%3A//mystreet7.com/internet/cum-sunt-parolele-stocate-pe-internet-conteaza-parola-puternica.html%22%2C%20null%2C%202%2C%20244060503%5D&ts=1353956238249

---

Citat:

---

Postat în original de buzucan

Asa era, nu am umblat in robots.txt. Sa sterg linia?

---

Poti sa o stergi, ca am vazut ca de acolo se incarca jquery, dar nu cred ca e de la asta.

Nichita:
1. pot scoate reclama link si o mut jos.
2. Foarte multi folosesc linkwithin..dar daca ar fi o problema de la el, il scot. Nu-i bai.
3. Artificial nu am nimic. Nu stiu sa fac asa ceva. Am contul de mult timp si am dat foarte multe share-uri la articole..chiar foarte multe. Faza e ca eu am adaugat aproape maxim 5000 si era si normal ca sa fiu si eu adaugat .. cu toate ca putini au facut-o 1720.. si sunt destul de activ pe G+. Practic cu ajutorul lui am ridicat blogul la inceput.
** ce ai vazut tu cred ca e pagina personala, cea a blogului are 14 + :)

/////

1. Am mutat reclama la finalul continutului.
2. Am dezactivat linkwithin

@puthre cu ce crezi k ar afecta Disallow: /wp-includes/ ?

Citat:

---

Postat în original de Bogdan Patru

@puthre cu ce crezi k ar afecta Disallow: /wp-includes/ ?

---

Se incarca jquery de acolo. Daca google nu-l poate incarca, nu-l poate nici executa deci s-ar putea sa randeze pagina in mod diferit la el.

Pentru eroarea asta nu stie nimeni nimic?
"Acces refuzat - Googlebot nu a putut accesa cu crawlere adresa dvs. URL, deoarece serverul dvs. solicită date de conectare pentru accesarea paginii sau împiedică Googlebot să acceseze site-ul dvs.
http://mystreet7.com/wp-app.php/service

Odata accesat link-ul, primesc: AtomPub services are disabled on this site. "

Articolele alea sunt cumva traduse urmand structura articolului original?

L.E. De fapt sunt aproape sigur ca sunt traduse, recunosc cateva articole pe care le-am citit pe extern. Sunt sanse sa fie problema si de aici.

O parte sunt traduse, dar este posibil ca in unele sa fie pastrata si structura originalului. Daca as reedita articolele cu pricina as avea vreo sansa sa ies din penalizare?

Daca e penalizare nu o sa scapi prea curand...

Pacat... pai si care e solutia? Abandon si sa incep altul ferindu-ma de greselile pe care le-am facut? Sau multa rabdare si munca pana revin cu asta?

Asta se pare ca s-a intamplat multora, inclusiv mie. Pe 3-4 noiembrie a fost un update Panda care a ridicat multe bloguri. Pe 21 a fost alt update, desi multa lume a semnalat ca traficul a inceput sa scada incepand cu 19 noiembrie.

Eu tot ce am castigat pe 4 noiembrie, am pierdut pe 19. Nu am nimic in plus si nici in minus fata de 3 noiembrie.

Cat despre wp-includes in robots, asa vine wordpress default si nu cred ca e vreo problema. disallow inseamna noindex, dar asta nu inseamna ca Google nu poate parsa.

Din cautarile google referitoare la problema ta, ce vad in comun la alte posturi e modificarea fisierului robots.txt. Sau personal de catre tine, sau ai instalat/modificat pluginul XML Sitemap generator ?

Daca in setarile XML Sitemap ai activa optiunea urmatoare, e foarte important sa nu ai si fizic un fisier robots.txt.

Add sitemap URL to the virtual robots.txt file.
The virtual robots.txt generated by WordPress is used. A real robots.txt file must NOT exist in the blog directory!

Una dintre solutiile care se pare ca au mers pentru altii, mai jos. Insa aceasta linie in plus adaugata e posibil sa iti afecteze functionarea unor pluginuri (aici e mai mult o banuiala a mea )

Citat:

---

Hi Rijo,

I didn't remove my robots.txt file. I just inserted the line:

Disallow: /wp-app.php/service

My robots.txt file is now (completely):

User-agent: *
Disallow:
Disallow: /wp-app.php/service

Sitemap: http://www.localseoireland.ie/sitemap.xml.gz

My SERPs aren't back yet but at least there are no crawl errors appearing in Webmaster Tools so hopefully I will re-appear within the next week or so. I thought I had been hit by Penguin as well to be honest!

Hopefully it all sorts itself out.

Good luck!

Regards,

Sean

---

Cel mai bine, citeste topicul complet Google Groups

Citat:

---

Daca in setarile XML Sitemap ai activa optiunea urmatoare, e foarte important sa nu ai si fizic un fisier robots.txt.

Add sitemap URL to the virtual robots.txt file.
The virtual robots.txt generated by WordPress is used. A real robots.txt file must NOT exist in the blog directory!

---

E bifata optiunea, dar e asa de cand lumea. Incerc sa o debifez sa vad ce iese. Multumesc de raspuns.

Inainte sa debifezi, verifica daca ai in root fisierul robots.txt. Daca NU ai fizic fisierul, atunci nu are rost sa dezactivezi optiunea aceea si incearca cealalta varianta, sa adaugi linia aceea cu Disallow: /wp-app.php/service

Citat:

---

Postat în original de Alex Dumitru

Asta se pare ca s-a intamplat multora, inclusiv mie. Pe 3-4 noiembrie a fost un update Panda care a ridicat multe bloguri. Pe 21 a fost alt update, desi multa lume a semnalat ca traficul a inceput sa scada incepand cu 19 noiembrie.

Eu tot ce am castigat pe 4 noiembrie, am pierdut pe 19. Nu am nimic in plus si nici in minus fata de 3 noiembrie.

Cat despre wp-includes in robots, asa vine wordpress default si nu cred ca e vreo problema. disallow inseamna noindex, dar asta nu inseamna ca Google nu poate parsa.

---

Si eu tot asa am patit :pe 3-4 noiembrie a inceput sa creasca iar pe 19-20 a inceput sa scada.Multi spun ca ar fi anulat Panda de pe 3 noiembrie.

http://i.imgur.com/YjBq1.png

Un mic update.

Ce am mai facut intre timp:
- am reactualizat 95% din articole
- am pus toate link-urile externe pe "nofollow"
- am redus din keyword stuffing-ul unor articole..

De eroarea din webmaster tool nu am scapat.

ai incercat adaugarea liniei de care iti spuneam in robots?

Citat:

---

Postat în original de Sutzu

Inainte sa debifezi, verifica daca ai in root fisierul robots.txt. Daca NU ai fizic fisierul, atunci nu are rost sa dezactivezi optiunea aceea si incearca cealalta varianta, sa adaugi linia aceea cu Disallow: /wp-app.php/service

---

Nu am fisierul fizic in root. Am incercat sa pun linia in robots din webmaster dar vad ca nu mi-o salveaza :D. Inca nu m-am lamurit despre e vorba cu eroarea aceea.

Adauga pluginul WP Robots Txt (cauta din Add New) si apoi intra la Settings -> Privacy si acol vei vedea continutul fisierului robots.txt.

Adauga la sfarsit linia:

Disallow: /wp-app.php/service

Si da-i save changes. Ar trebui sa te scape de eroarea din WT.

Salutare,

Am instalat ultima versiune de wordpress pe două domenii și întâmpin aceeași eroare:

Citat:

---

Googlebot can't access your site

Over the last 24 hours, Googlebot encountered 31 errors while attempting to access your robots.txt. To ensure that we didn't crawl any pages listed in that file, we postponed our crawl. Your site's overall robots.txt error rate is 100.0%.

You can see more details about these errors in Webmaster Tools.

---

În WT, la crawl / fetch data, îmi dă următoarea eroare:
Ataşament 3576

Am intrat pe forumul de suport wordpress, am instalat WP Robots Txt și am urmat instrucțiunile lui Sutzu de mai sus, dar nu reușesc să-i dau de capăt.

Menționez că în urma verificărilor am observat că arhiva de instalare wordpress actuală nu contine nici un fișier robots.txt

V-aș ruga să mă ajutați. Mulțumesc!

P.S.: Știu că dezgrop un topic mai vechi, dar l-am găsit cu procedura de căutare și am considerat că mai bine postez aici decât să deschid un subiect nou.

Dacă este cineva interesat, am rezolvat problema în felul următor:

1. Am creat un fisier Robots.txt cu următorul conținut:

Citat:

---

User-agent: *
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /wp-admin/

---

2. Am urcat fișierul Robots.txt pe server, in folder-ul root (folder-ul principal), unde se află și folderele wp-content și wp-includes

3. Am intrat in Webmaster Tools / Crawl / Fetch as Google / [FETCH]

Cu siguranță că va ajuta pe cineva informația asta :)

Citat:

---

Postat în original de LogOn

Dacă este cineva interesat, am rezolvat problema în felul următor:

1. Am creat un fisier Robots.txt cu următorul conținut:


2. Am urcat fișierul Robots.txt pe server, in folder-ul root (folder-ul principal), unde se află și folderele wp-content și wp-includes

3. Am intrat in Webmaster Tools / Crawl / Fetch as Google / [FETCH]

Cu siguranță că va ajuta pe cineva informația asta :)

---

Blocand /wp-content/, blochezi accesul la /themes/ ceea ce se va traduce prin imposibilitatea accesarii fisierului .css. Asta va duce la imposibilitatea intelegerii layoutului de catre Google si posibile probleme cu Panda & orataniile.

Îți mulțumesc, Nichita!

Am scos linia respectiva din conținutul fișierului. De curiozitate, dacă se poate... Ce fac celelalte două linii (Disallow: /wp-includes/ ; Disallow: /wp-admin/)? Asta ca să înțeleg eu mai bine procesul.

Mulțumesc!

User-agent: * -mesajul este transmis tuturor ( * ) robotilor
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /wp-admin/

Disallow: / - Spune robotilor sa nu viziteze nici una din paginile siteului, iar dupa caz Disallow: /wp-includes/ si Disallow: /wp-admin/ sa nu viziteze continutul celor doua subfoldere.