google sitemap problems

[serban]

nu recomand la nimeni care are un site mare dinamic sa foloseasca google sitemap. e useless.

cititi: http://groups.google.com/group/googl...9c93b5b8c39f06

eu am patit-o cu ceva timp in urma, site-ul se indexa normal, am ajuns la 400.000+ pagini (fara duplicate and shit). ma incriu la google sitemap, pun niste sitemapuri generate. in 4-5 zile scade nr de pagini la 120.000 la blana. am crezut ca am facut eu ceva gresit, da nu inteleg: daca introduceam un sitemap de 10 pagini imi scadea indexul la 10 pagini?

serviciul e inca beta dupa parerea mea, si necesita testing intens. ei spun in documentatie ca orice miscare in sitemap nu afecteaza crawling-pathul googlebot-ului. din parti.

la 9 ore dupa ce am scos complet sitemapurile si site-ul din serviciu, googlebot a revenit cu indexarea la modu greu: 2 requesturi pe secunda.

[Cristian Mezei]

Parerea mea este ca sitemaps indexeaza numarul real de pagini, pe cand natural iti sunt indexate multe pagini duplicate.

[moSSad]

in principiu, sitemap e o chestie care ajuta mult doar daca ai un site nou lansat sau ai facut modificari majore (structura url-uri, noi sectiuni, etc) pe actualul site.
daca ai un site "vechi" si ok dpdv crawlability, poti renunta linistit la sitemaps, scapi de batai de cap

[preacher]

Nu m-as baza niciodata pe google sitemaps ca sa imi fie indexate site-urile, ar fi mare prostie. Recunosc ca il folosesc, dar asta doar pentru erorile de crawling si pentru cuvintele cheie care imi apar la queries.

[serban]

si eu tot pt erorile de crawling si cuvintele cheie, da am zis wtf, poate daca ii scriu acolo niste pagini cu prioritate, le acorda o mai mare atentie (chestie contrazisa de documentatia lor)

[preacher]

@serban, site-ul tau are 400 000 de pagini? Daca da, de ce nu ai facut sitemap pentru toate, ca oricum nu cred ca le-ai scris pe toate de mana :p?

Bafta!

[serban]

am facut 4 sitemap-uri pentru link-urile de intrare, alea importante totalizand 26.000+ pagini

am pornit un crawler pe site, si in 2 zile am 300.000+ pagini unice deja

nici nu ma gandesc sa mai folosesc google sitemap, si nici nu ma gandesc sa fac generare la tot site-ul, ceea ce la un site dinamic cu peste 9 variabile get in unele situatii, inseamna o gramada de combinatii. astept google sa indexeze tot.

vad ca site-ul a inceput sa-si revina oarecum

[adistan]

exact la voi veneam sa scriu, am aceeasi problema:))

normal, m-am conformat, am citit topicurile anterioare si am ajuns aici, deci nu mai deschid subiect nou.

ideea e asa:

cod-postal. dat drumul pe 1 iulie. dupa 5 zile, 18 pagini indexate, 13 de pe cod-postal si doar prima pagina de la germania.cod-postal, franta.cod-postal etc.

pun sitemap pe cod-postal (aka romania). dupa 3 zile de crawl, depaseste db-ul crawl-urului 900 mega, imi zice ca mai mult nu poate duce, zic ok, genereaza-mi harta. 400 de mii si ceva. rupe-o in 45.000, rezulta 9 bucati. le bag in sitemap google. a doua zi, site:cod-postal.ro rezulta 1 link! acum am deja 4!! ehee...

acum. intrebare. am muncit la franta tot asa, 2-3 zile. tot asa, are si ala peste 400.000 (obs: toate content unic), mai are rost sa pierd timpul sa le rup in bucati si le incarc la google, sau il las in plata lui (si scot si ce am pus pt romania).

nu va mai zic pa, ca mi-am auzit vorbe :)))

adi

[Adam]

Lansez site de 80.000+ pagini, la primul PR update obtin un rezonabil 4 pentru homepage, site:www site com, 14 rezultate. Pentru subcategorii PR 3, restul nimic. 0 curat, pana si pagina de Links e 0, nici macar un link-exchange nu pot cere.

Doua luni mai tarziu ii generez un sitemap, bag in Google Sitemaps, incepe sa spidereasca in draci (4-5000 pagini zilnic) in doua saptamani inghite cam tot ce i-am dat in sitemap. Doar 10-15 erori cand a fost serverul down dar si alea au fost temporare.

De atunci mai trec 5 luni, site:www site com, 217 rezultate. Spiderul Google inghite in continuare paginile desi in sitemap sunt setate cu changefreq="yearly".

Google Sitemaps rulz.

[Cristian Mezei]

Nimeni nu a spus ca sitemaps este un serviciu perfect.

Insa sincer sa fiu ofera informatii foarte necesare oricarui webmaster.

Ai incercat sa te folosesti de datele pe care le ofera ?