Citat Postat în original de Bogdan Ungureanu Vezi Post
StarNET, ai folosit un crawler opensource sau este unul custom?
crawler custom facut de mine de la 0

Citat Postat în original de -Rares- Vezi Post
Daca vreau sa ma sterg din baza de date a siteului tau cum fac? Fara sa urc pe site meta-uri sau alte rahaturi.
pai momentan e doar optiunea de meta, nici ea nu e inca implementata cap coada dar pana la lansare va fi. A doua optiune pentru o stergere mai rapida e submit la un form cu verificare existenta un fisier in root-ul domeniului. Cel mai probabil voi implementa si acest lucru.

Update despre proiect: cand am facut crawler nu am luat in considerare domenii de forma: com.ro, co.uk, etc ... asa ca acuma lucrez la acest lucru