cum se poate limita numarul de threaduri pentru yahoo cand scaneaza un domeniu? (crawl) ... foarte des am observat ca am cel putin 3 roboti de la yahoo care scaneaza simultan un domeniu... si cand ai mai multe domenii pe acelasi server incepe sa se cunoasca !:(
