pai asta ar insemna ca terbuie sa ai linkurile deja intr-o baza de date, nu ?
daca da, atunci nu vad o prea mare problema sa faci un script sa ti le puna intr-un xml.
Totusi, un avantaj destul de mare in a folosi un crawler ar fi ca poti sa vezi ce headere primest, iar in caz ca ai vreun dead link sau ceva de genul il depistezi mai rpd decat daca astepti dupa google sitemaps.