Banat in Yahoo ?

Incearca sa pui asa in robots.txt

Cod:

---

User-agent: *
Allow: /

Sitemap: http://pctroubleshooting.ro/indexsitemap.xml

---

O fi vreo eroare si vrea neaparat sa ii specifici ca are acces sa indexeze.

Am adaugat robots.txt-ul recomandat pentru versiunea mea de forum. Acum acesta arata asa:

Cod:

---

Sitemap: http://pctroubleshooting.ro/indexsitemap.xml

User-agent: *
Disallow: /admin/
Disallow: /cache/
Disallow: /converge_local/
Disallow: /hooks/
Disallow: /ips_kernel/
Disallow: /retail/
Disallow: /public/style_captcha/
Disallow: /index.php?app=core&module=task
Disallow: /index.php?app=core&module=usercp&tab=forums&area=forumsubs
Disallow: /index.php?app=core&module=usercp&tab=forums&area=watch&watch=topic
Disallow: /index.php?app=forums&module=extras&section=forward
Disallow: /index.php?app=members&module=messaging
Disallow: /index.php?app=members&module=chat
Disallow: /index.php?app=members&module=search
Disallow: /index.php?app=members&module=search&do=active
Disallow: /index.php?&unlockUserAgent=1
Disallow: /*app=core&module=usercp
Disallow: /*app=core&module=usercp
Disallow: /*app=members&module=messaging
Disallow: /*&p=
Disallow: /*&pid=
Disallow: /*&hl=
Disallow: /*&start=
Disallow: /*view__getnewpost$
Disallow: /*view__getlastpost$
Disallow: /*view__old$
Disallow: /*view__new$
Disallow: /*view__getfirst$
Disallow: /*view__getprevious$
Disallow: /*view__getnext$
Disallow: /*view__getlast$
Disallow: /*&view=getnewpost$
Disallow: /*&view=getlastpost$
Disallow: /*&view=old$
Disallow: /*&view=new$
Disallow: /*&view=getfirst$
Disallow: /*&view=getprevious$
Disallow: /*&view=getnext$
Disallow: /*&view=getlast$
Disallow: /*?s=
Disallow: /*&s=
Disallow: /index.php?app=core&module=global&section=login&do=deleteCookies
Disallow: /index.php?app=forums&module=extras&section=rating
Disallow: /index.php?app=forums&module=forums&section=markasread

---

Daca am pus aceste linii cu disallow se subintelege ca restul este allowed, nu ? Sau mai trebuie adaugat si:

Cod:

---

User-agent: *
Allow: /

---

?

Merci !

parerea mea, vis-a-vis de robots.txt :

1. mergi la www[.]google[.]com/webmasters creeaza cont si adauga-ti site-ul (in cazul in care nu ai facut-o inca)
2. din dashboard, selecteaza site-ul cu pricina, apoi mergi la Site configuration -> Crawler Access si fa click pe Generate robots.txt, fa scroll si adauga acolo (Specify additional rules) ce nu vrei sa indexeze motoarele de cautare, apoi faci scroll si click pe Download si urci fisierul pe server, in /root

Eu zic, ca asta este cea mai buna solutie si unde mai pui ca daca vine de la google, nu mai incape indoiala ca ai pus sau nu ai pus Allow sau Disallow corect.
Pentru a verifica daca totul este in regula, fa click pe Test robots.txt si vezi ce zice, ar tebui sa fie "Status 200 (ok)".

cu sitemap-ul pus in robots.txt nu stiu ce sa zic, dar nu iti recomand, eu unu nu folosesc si poti sa iti spun ca de curand am terminat un site de vreo 70 de pagini, care a fost indexat in 2 zile de catre google si yahoo, pana si bing-ul a indexat vreo 5 pagini.

Succes!

Citat:

---

Postat în original de Cika-Bum

parerea mea, vis-a-vis de robots.txt :

1. mergi la www[.]google[.]com/webmasters creeaza cont si adauga-ti site-ul (in cazul in care nu ai facut-o inca)
2. din dashboard, selecteaza site-ul cu pricina, apoi mergi la Site configuration -> Crawler Access si fa click pe Generate robots.txt, fa scroll si adauga acolo (Specify additional rules) ce nu vrei sa indexeze motoarele de cautare, apoi faci scroll si click pe Download si urci fisierul pe server, in /root

Eu zic, ca asta este cea mai buna solutie si unde mai pui ca daca vine de la google, nu mai incape indoiala ca ai pus sau nu ai pus Allow sau Disallow corect.
Pentru a verifica daca totul este in regula, fa click pe Test robots.txt si vezi ce zice, ar tebui sa fie "Status 200 (ok)".

cu sitemap-ul pus in robots.txt nu stiu ce sa zic, dar nu iti recomand, eu unu nu folosesc si poti sa iti spun ca de curand am terminat un site de vreo 70 de pagini, care a fost indexat in 2 zile de catre google si yahoo, pana si bing-ul a indexat vreo 5 pagini.

Succes!

---

Merci pentru sfaturi ! Am un cont pe GWT.
Softpedia de exemplu, afiseaza adresele catre sitemap-uri in robots.txt: forum.softpedia.com/robots.txt

Cred ca la tine e cumva o eroare de afisare. Din cate vad nu (mai) esti banat in Yahoo.

Site Explorer - Search Results
vs.
site:pctroubleshooting.ro - Yahoo! Search Results

Si iesi si la search:
Schimburi - PC Troubleshooting - Yahoo! Search Results

Citat:

---

Postat în original de gaby

Merci pentru sfaturi ! Am un cont pe GWT.
Softpedia de exemplu, afiseaza adresele catre sitemap-uri in robots.txt: forum.softpedia.com/robots.txt

---

mda, nu stiu ce sa zic, chiar nu m-am uitat pe robotii lu softpedia nici macar din curiozitate, dar trebuie sa analizez mai bine ce e acolo....vad ca da Disallow la /joburi/bla-bla dar in acelasi timp are sitemap pentru /joburi

numai ei stiu ce au facut acolo :)

oricum, e alegerea ta, daca sa pui sitemap in robots sau nu, dar eu raman la ce am zis mai sus.

Am auzit ca nu mai esti banat;) sau what-so-ever ce era...
Felicitari!

Hmm, eu cand efectuez cautarea site:pctroubleshooting.ro pe yahoo.com ma redirectioneaza catre Yahoo Site Explorer, care imi afiseaza doar o singura pagina:

http://img607.imageshack.us/img607/1375/cautare.png

Daca accesez link-urile postate de tine, intr-adevar imi afiseaza si mie rezultate. Ciudat :-?

Citat:

---

Postat în original de gaby

...
Daca accesez link-urile postate de tine, intr-adevar imi afiseaza si mie rezultate. Ciudat :-?

---

poate cei de la yahoo s-au gandit sa se joace putin cu mintea ta :)

glumeam, nu stiu ce sa zic, dar daca adaugi si in yahoo sitemap-ul, ar trebui sa fie ok, indexeasa ei putin mai greu, dar indexeaza pana la urma.

succes!

Este adaugat si in yahoo sitemap-ul...

Si uite asa a aflat lumea ca nu numai google danseaza.
The future of salsa: yahoo dance

Scuze de offtopic.