Asta este tocmai esenta intrebarii pe care mi-o pun. Daca poate fi un succes comercial, tocmai avand in vedere aceasta temere, daca o pot numi asa.Postat în original de lovelife
--- Later Edit --- (ca mi-a fost lene sa apas "Edit")
Crawlerul merge pe o singura masina deocamdata. Fireste ca poate fi distribuit, dar nu este necesar.si eu merg pe varianta 3... BTW, o intrebare... crawlerul tau merge si distribuit?nu de alta, dar ma gandesc ca sa ruleze pe un singur calculator e destul de greu. si eu am facut cu niste colegi un crawler web distribuit in C# pt un proiect la facultate
Pentru curiozitate tehnica, celor care o au, momentan lucreaza pe o masina Intel Core i7-2600K @ 3.40GHz, 8GB RAM, 2x1TB HDD, SSD de 64GB. SSD-ul nu este utilizat inca (va fi folosit in curand pentru interogarile SQL mai dificile). Pentru moment are o incarcare de 10-20% CPU si utilizeaza 2.5GB RAM din cei 8. Este loc de crestere inca foarte mult pentru rulajul pe o singura masina. In plus, procesarea lingvistica si contextuala este optimizata doar partial deocamdata.
Am monitorizat performantele pe masura ce indexul creste, si scaderea de performanta este deocamdata zero. Majoritatea interogarilor se executa sub 0.1 ms. Repet, softul este gandit din start sa fie scalabil (utilizeaza buffere RAM personalizate in locul indecsilor clasici SQL, hash-uri si tehnici avansate de optimizare a interogarilor unde e necesar). Am lucrat in domeniul performantei pe baze de date foarte mari cu ani in urma - incarcam, filtram si sortam cativa GB de date complexe, in cateva secunde pe o masina chioara P3. Cu calculatoarele moderne, nu sunt probleme de performanta la un astfel de proiect, daca stii sa scrii soft.
Oricum intrebarile pe care mi le pun sunt mai curand de viabilitate a proiectelor si de succesul pe care l-ar putea avea.
Pot sa gandesc si altfel. Personal dispun de suficient in domeniul financiar, nu am nevoie neaparat sa scot bani la modul asta. Acest proiect triplu este mai mult o chestiune interesanta in domeniul web, sa zicem ca un hobby, ca un proiect personal in stadiu deja avansat, si am unele idei originale pe care le voi implementa in aceste 3 sub-proiecte. Daca ar putea fi un succes pe domeniul free, probabil ca il pot transforma in asa ceva. Ma gandesc insa ca punctul 3, facut public, ar putea crea destule controverse, pentru ca ar putea oferi puterea analizei de business, si date de sinteza pe practic orice nisa, oricarei persoane care ar dori sa afle asa ceva. Mi se pare cumva echivalent cu a da oricarui om permis de port arma, tradus in zona de afaceri....
De fapt, ideea e de orientare a proiectului pe propria nisa, si nu neaparat de monetizare. Ma intereseaza sa dau valoare unor idei, atata tot.
Bogdan Ungureanu: Ideea cu registrarul nu e rea deloc. Poate voi face si ceva de gen, daca nu te-ar deranja faptul ca as utiliza o idee care nu-mi apartine. Imi place sa realizez lucruri diferite, si se mai creeaza si locuri de munca, pe un proiect interesant, care ar putea fi dezvoltat si international. De altfel intregul soft si proiect poate fi portat international.
--- Later Edit --- (ca mi-a fost lene sa apas "Edit")
Am deja unele softuri in genul market samurai, deci n-as duce lipsa de surse de idei. Dar o sa-l instalez si pe acesta. Iar daca e bun, poate mai tarziu iau si o licenta (folosesc tot felul de softuri de gen, pe proiecte comerciale ne-legate de subiectul acestui thread).Si eu as merge to pe varianta 3, dar te invit sa iti instalezi versiunea demo de la market samurai si sa mai furi de acolo idei.
Răspunde cu citat