Proiect Domenii, Ip-uri, etc

[Bogdan Ungureanu]

StarNET, ai folosit un crawler opensource sau este unul custom?

[StarNET]

StarNET, ai folosit un crawler opensource sau este unul custom?

crawler custom facut de mine de la 0

Daca vreau sa ma sterg din baza de date a siteului tau cum fac? Fara sa urc pe site meta-uri sau alte rahaturi.

pai momentan e doar optiunea de meta, nici ea nu e inca implementata cap coada dar pana la lansare va fi. A doua optiune pentru o stergere mai rapida e submit la un form cu verificare existenta un fisier in root-ul domeniului. Cel mai probabil voi implementa si acest lucru.

Update despre proiect: cand am facut crawler nu am luat in considerare domenii de forma: com.ro, co.uk, etc ... asa ca acuma lucrez la acest lucru