Proiect: Motor de cautare pentru site, Hosted

[emm]

Salut,

Revin cu alta idee de proiect la care lucrez in prezent.

Intentionez sa ofer pe parcursul anului viitor, un sistem de hosted search (utilizand ceva soft de la un proiect mai vechi). Cu alte cuvinte, introduci un code snippet pe situl tau, si voila - ai propriul tau motor de cautare, customizabil.

Bineinteles, un astfel de proiect trebuie sa fie feature rich, si orientat catre dorintele webmasterilor. Exista cateva astfel de sisteme, unele mai vechi, dar au fiecare ups and downs. Inclusiv Google ofera unul. Iar proiectul nu este foarte usor, nu e easy cheesy, mai ales daca vrei sa-l faci la modul serios. Proiectul va avea 2 variante, una free (ad-supported) si una platita (varianta de intrare va fi de cel mult 5$ pe luna). Intentionez sa il ofer si in Romania, dar mai ales afara.


As supune aceasta idee de proiect membrilor, cer pareri pentru 2 intrebari:

1) Ati utiliza o astfel de varianta free? Varianta free va permite indexarea a aproximativ 2000-4000 pagini din site, si va contine text ads in rezultate.
Referitor la cum vor aparea aceste ads, vor fi 2-3 randuri de text maxim, care vor fi identificate diferit si colorate, "sponsored", urmand ca restul sa fie marcate "results from the site".

Toate variantele free existente pe care le-am gasit, folosesc aceasta metoda, pentru a-si acoperi costurile evidente de rulaj. (nota: un astfel de sistem genereaza consum de trafic si cpu destul de semnificative, in afara de costurile de development, deci nu ma mira acest aspect.)

2) Ce features v-ati dori/ar fi bine sa aiba? Ceva ce poate nu aveti in prezent, si v-ar folosi. Incerc sa vin cat mai aproape de dorintele celor care il vor utiliza.

Avantajul, odata lansat, va fi ca poate fi testat oricand gratuit, printr-un cont free, dupa care se poate pastra daca corespunde cerintelor sau nu.

Multumesc anticipat pentru orice pareri.

[Alex Dumitru]

Vreau sa-ti pun eu o intrebare in primul rand. Ce oferi in plus fata de Google CSE ?

[emm]

Cred ca sunt zeci sau sute de lucruri care se pot oferi in plus fata de ceea ce ofer Google CSE. Nu am dubii ca va exista un edge (sau mai multe).

Iti dau doar un prim exemplu simplu: Indexing. CSE ofera un control extrem de limitat asupra indexarii. "Index now?..."

Sau un al doilea: capacitatea de a face search pe clustere de situri, dar pe topics (un subtopic, cautare pe un site sau pe un cluster). CSE ofera un url filter, dar nu ajuta intotdeauna. Vei putea marca diferite zone in site functie de topic. Sau, probabil, va exista inclusiv un autodetect in acest sens.

Sau un al treilea: Acces direct la date pentru conturile paid, in care caz va exista si exemple de de implementare (plugin-uri wordpress, cod php samd) pentru userii avansati, incat sa poti introduce search-ul direct in site, cu posibilitate de customizare 100%.

Am dat doar vreo 3, dar pot povesti pana dimineata.

Pot oferi repet, zeci sau sute de lucruri pe care nu le ofera CSE. Inclusiv un pret considerabil mai mic. As fi interesat insa sa aud ce vor utilizatorii.

[emm]

Offtopic: ca sa intelegi de unde pornesc,

Search-ul a fost mereu o zona in care m-a tentat sa dezvolt ceva.

Prin '1997 sau 98, aveam primul search engine facut, folosea Windows NT si ASP varianta old, pus pe un calculator la capatul unei linii inchiriate de 33k. Numai linia inchiriata aia (sarma + net) ma costa vreo 550$ pe luna la vremea aia, o suma enorma pentru ca dolarul avea cu totul alta valoare. Stiu ca am mai dat cam 900$ (2x450) pe doua modem-uri USR care sa stie protocolul.

In ultimii 10 ani am lucrat mereu la proiecte de search, inclusiv o tentativa de a lansa un motor de cautare alternativ pe RO. Nu am renuntat inca la acea idee, desi momentan ideea curenta e mai tentanta.

[lovelife]

Daca este ceva ce sa merite prin facilitati suplimentare, eu as si plati.
Ma gandesc sa implementez in unul din site-urile mele un crawler care sa scaneze doar anumite site-uri si sa ofere rezultate din acestea
Varianta cu ads nu as pune, prefer google si sa pun adurile mele

[emm]

Sigur, e bine de stiut ca sunt si oameni interesati de varianta platita. Desi sunt convins ca vor fi destui care sa vrea si varianta free.

Oricum, costurile vor fi rezonabile pentru paid - de genul cativa $ pe luna, oricum nu mai scumpe decat alte variante disponibile online. Incerc sa ofer ceva competitiv.

Daca este ceva ce sa merite prin facilitati suplimentare, eu as si plati.
Ma gandesc sa implementez in unul din site-urile mele un crawler care sa scaneze doar anumite site-uri si sa ofere rezultate din acestea
Varianta cu ads nu as pune, prefer google si sa pun adurile mele

[Ciprian.Olaru]

1. nu as folosi un astfel de sistem care livreaza third-party ads;
daca as folosi (asta e alta discutie) as prefera sa platesc pentru o varianta clean;

personal, as vedea modelul de business mai aproape de cel al mailchimp: free pt volum limitat ca sa te atraga in sistem si paid imediat ce ai un volum suficient incat sa iti permiti;

2. nu pot raspunde (nu sunt in nisa)

suplimentar: in ro cel putin userul nu prea e obisnuit sa caute in site cu searchul siteului (pentru ca de cele mai multe ori nu merge sau merge prea incet sau returneaza pagini aiurea); inclusiv aici pe forum lumea cauta cu google si nu cu searchul intern;
apoi, exista solutii open-source pentru hosted search care pot sa fie integrate cu un site (care chiar are nevoie de asa ceva);
daca as incerca sa construiesc ceva avantaje serviciului meu de search.. as cauta sa ma adresez cumva si celor din situatiile de mai sus;

[filip.camara]

Daca este ceva ce sa merite prin facilitati suplimentare, eu as si plati.
Ma gandesc sa implementez in unul din site-urile mele un crawler care sa scaneze doar anumite site-uri si sa ofere rezultate din acestea
Varianta cu ads nu as pune, prefer google si sa pun adurile mele

Exact asta face Google CSE

Referitor la intrebarea principala, daca as avea nevoie de un feature pe care sa nu-l gasesc free ( de ex. la Google CSE), as folosi Lucene care e portat pe majoritatea platformelor si cu care pot face ce vreau eu. Nu cred ca e cineva care are nevoie de custom search si nu-si permite cateva sute de euro pentru o solutie custom cu Lucene sau cu altceva.

[emm]

1. nu as folosi un astfel de sistem care livreaza third-party ads;
daca as folosi (asta e alta discutie) as prefera sa platesc pentru o varianta clean;

personal, as vedea modelul de business mai aproape de cel al mailchimp: free pt volum limitat ca sa te atraga in sistem si paid imediat ce ai un volum suficient incat sa iti permiti;

2. nu pot raspunde (nu sunt in nisa)

suplimentar: in ro cel putin userul nu prea e obisnuit sa caute in site cu searchul siteului (pentru ca de cele mai multe ori nu merge sau merge prea incet sau returneaza pagini aiurea); inclusiv aici pe forum lumea cauta cu google si nu cu searchul intern;
apoi, exista solutii open-source pentru hosted search care pot sa fie integrate cu un site (care chiar are nevoie de asa ceva);
daca as incerca sa construiesc ceva avantaje serviciului meu de search.. as cauta sa ma adresez cumva si celor din situatiile de mai sus;

Multumesc pentru sugestii.
Voi lua in considerare si modelul free ca principiu, inteleg perfect avantajele la care te referi, desi cel ad-supported mi se pare mult mai potrivit pentru acest produs (nu e deloc acelasi gen de produs ca mailchimp).

Trebuie inteles insa ceva aici. Proiectul asta il gandesc sa ofere, lucruri dincolo de strict avantajul de a putea face o cautare decenta pe site.

In general, oamenii care produc ceva bani cu situl vor opta pentru varianta paid, mai ales ca vor fi costuri mici. Tinta principala vor fi totusi clientii platitori; iar felul in care vor fi atrasi este ca sistemul va oferi features la care nu te-ai gandi, features care, pentru un site care face ceva efectiv, va produce si va economisi bani in loc sa coste. In felul acesta, search-ul se va plati singur, practic va fi free, prin restul avantajelor oferite. Vor fi features care vin la bundle, care vor aduce astfel de avantaje. Asa gandesc sistemul.

Varianta ad supported va permite celor care vor sa testeze sistemul, sa il poata testa integral, dupa care isi vor da singuri seama daca merita sau nu. Am cateva solutii care sa mareasca atractivitatea acestei versiuni.

Despre open source search, desigur ca poti utiliza, dar implementarea va fi mult mai usoara cu sistemul pe care il ofer. In plus, vor fi features unice pe care acele sisteme nu le ofera.

Cand voi lansa proiectul, voi deschide un thread cu ocazia lansarii, in care vor fi prezentate avantajele, si sunt convins ca vor fi primite cu interes. Eu unul, personal, voi beneficia (pentru alte activitati pe care le am) de avantajele sistemului, in care voi implementa unele chestii care momentan le utilizez doar in-house, si pe care nu le-am gasit in alta parte.

[emm]

Exact asta face Google CSE

Referitor la intrebarea principala, daca as avea nevoie de un feature pe care sa nu-l gasesc free ( de ex. la Google CSE), as folosi Lucene care e portat pe majoritatea platformelor si cu care pot face ce vreau eu. Nu cred ca e cineva care are nevoie de custom search si nu-si permite cateva sute de euro pentru o solutie custom cu Lucene sau cu altceva.

Sigur ca nu toata lumea va vedea avantajele acestui sistem, cel putin nu din start. Unii poate nu il vor prefera niciodata, din motivul 459. Altii vor prefera ce ai spus tu. Nu toata lumea prefera bananele.

Totusi, daca esti creativ si ai experienta in domeniu, poti oferi features care sa iti garanteze o buna felie de clienti.