Sitemap la peste 1 mil de pagini

[dragoserv]

Am si eu o intrebare, cum sa fac un sitemap (adica mai multe) pentru un site cu peste 1 milion de pagini, am incercat tot felul de programe, tool-uri, script-uri php, nimic nu vrea sa merga cum trebuie, adica mi-ar lua o saptamana cu un program sa fac sitemap la un asfel de site, voi cu ce faceti ? sau mai bine zis, la un site asa mare e bine sa se faca sitemap ?
Multumesc celor care imi veti raspunde !

[Krm]

eu am folosit la 600k de pagini gsitecrawler. singura problema e ca a durat vreo 2 zile.

[dragoserv]

Pai cu programul asta la mine in 2 zile nu a facut nici la jumatate din site (culmea ca am cateva site-uri de genul asta )
Poate stie cineva o metoda mai avansata...

[Krm]

mai avansata nu cred ca exista. pentru ca la un numar asa de mare de pagini orice script php pica sau nu pune in sitemap toate link-urile. eu altceva mai bun nu stiu. sa vedem ce zic si altii.

[ConstantinLG]

pai, de ce va ganditi la crawler ce sa caute dupa 1 milion de pagini, cand foarte probabil website-ul tau are in spate o baza de date, si un pattern dupa care genereaza link-uri

Cat stai sa incerci tot felul de tool-uri, iti creezi propriul 'crawler' ce lucreaza direct pe baza de date, si nu vei avea nici un fel de problema

[dragoserv]

Am folosit "phpSitemapNG" dar nici asta nu da randament, dupa 2 zile de mers non-stop l-am oprit ca el cred ca mai mergea inca o saptamana...
Din baza de date direct cum zici tu "domnualin" cred ca e prea complicat...nu sunt sigur dar asa imi place sa cred...

[-Rares-]

Da, e mai complicat dar e cel mai sigur si dureaza doar cateva minute Fara batai de cap. Plus ca asa vei putea actualiza automat sitemapul odata cu crearea fiecarei pagini noi.

[kleampa]

clar din baza de date
la ~700.000 de pagini la mine dureaza nici 1 min
imi face un sitemap index si mai multe sitemap-uri de cate 25.000 de linkuri fiecare

[memelea]

in cazul in care generezi sitemap-ul din baza de date mai pui si un cron job sa faca treaba o data pe zi (depinde de cat de des este actualizat site-ul) si poti sa te culci pe o ureche.

[Marius Mailat]

Generezi totul din DB, uite aici detaliat codul php - http://www.submitsuite.ro/blog/sitem...000-de-linkuri