Interogarea query-urilor din baza de date se face foarte greu

Nu stiu daca am postat unde trebuie, dar am o problema spinoasa de rezolvat.
Ideea este ca am o baza de date cu filme, de 14.000 interogari, si cand ii dau listare cu afisare 10 pe pagina, imi ia cam 5-6 minute pana incarca rezultatele, pt urmatoarele 10 rezultate astept cam la fel. Ideea este ca daca eu caut dupa ceva, imi afiseaza rezultatele imediat.

Asta este sursa fisierului ce interogheaza baza de date: www.eeusoft.ro/test/search.txt
si capul tablelelor, pt titlul filmului: www.eeusoft.ro/test/1.jpg
si detaliile filmului: www.eeusoft.ro/test/2.jpg

si aici este formularul, sa va faceti o idee: Cautare filme

Stiu ca gresesc undeva la interogare, dar nu imi dau seama unde gresesc. Are cineva vreo idee?
Merci anticipat.

ALTER TABLE ov_detalii_film ADD FULLTEXT(REGIA, SCENARIUL,GENUL,Clasif);
si schimba in SELECT MATCH AGAINST

tot greu se incarca :(

mie mi-a gasit dupa "america" acceptabil in 1-2 secunde
as mai folosi id-uri cu indecsi pentru gen si clasificare

Iti merge greu pentru ca queryul ala al tau nu are nici o sansa sa mearga fara sa treaca prin toata baza de date.
In primul rand trebuie sa faci o tabela de cuvinte apoi un reverse index.

Adica:

Cod:

---

+++++++++++++++
+ ID + Cuvant      +
+++++++++++++++
+ 1 +  TAPSI        +
+ 2 +  CEL          +
+ 3 +  MAI          +
+ 4 +  MIC          +
+ 5 +  URECHEAT  +
....

si


+++++++++++++++++++++++++++++++
+ id + cuvant_id  + film_id  +  camp_ID+
++++++++++++++++++++++++++++++
+ 1 +  1              + 26      +  2        +
+ 2 +  2              + 26      +  2        +
+ 3 +  1              + 26      +  3        +
+ 4 +  2              + 26      +  3        +
......

---

unde camp_id e campul unde se gaseste cuvantul in inregistrarea din film

Apoi cautarea o faci pe cuvintele din reverse index (cautare exacta, fara LIKE) care te duce direct la id-ul de film si campul din care face parte.

Fara reverse index, la ce vrei tu sa faci acolo, orice optimizare ai face tot o sa faca full table scan.

Incearca si asa:

SELECT ov_filme.*, ov_detalii_film.*
FROM ov_filme AS ov_filme
INNER JOIN ov_detalii_film AS ov_detalii_film
ON ov_filme.ID_film=ov_detalii_film.id_film and $construct AND $construct_regizor AND $construct_scenarist AND $construct_tip_film AND $construct_clasificare
ORDER BY `ov_filme`.`ID_film` DESC

Experienta mea e bazata in mare parte pe Microsoft SQL, dar presupun ca toate bazele de date functioneaza la fel.

Adica prima data se obtine un set realizat din join, care evident contine toata lista de filme, iar acest set mare este filtrat apoi de clauza where.
In principiu, Microsoft SQL stie sa-ti optimizeze singur query-ul si sa-ti urce clauzele din where in on. In cazul tau, in functie de ce server folosesti e posibil sa nu.

Pasul 2 este sa creezi indecsi pe toate campurile pe care le filtrezi.

Deleted - Wrong thread.

Filip, am rulat si query-ul tau, am adaugat indecsi pentru toate campurile care apar in WHERE, dar din pacate se incarca la fel de greu.
Puthre, primesc baza de date modificata lunar, habar n-am cum sa fac ce ai spus (nu sunt asa de avansat in mysql).
Va multumesc pentru sfaturi.

Cred ca trebuie refacuta acea parte cap coada, si n-am nici o idee cum.

Citat:

---

Postat în original de zgabu

Puthre, primesc baza de date modificata lunar, habar n-am cum sa fac ce ai spus (nu sunt asa de avansat in mysql).

---

In mysql ai de facut 2 tabele. Nu e nimic avansat. Restul de face din php.

pai tabelele sunt facute, programarea in php este facuta, dar este facuta basic, in sensul ca nu interoghez cum trebuie baza de date, caci se incarca foarte greu. Trebuie sa incarce cumva doar prima pagina, nu toata baza de date.

Citat:

---

Postat în original de zgabu

pai tabelele sunt facute, programarea in php este facuta, dar este facuta basic, in sensul ca nu interoghez cum trebuie baza de date, caci se incarca foarte greu. Trebuie sa incarce cumva doar prima pagina, nu toata baza de date.

---

Spuneam a trebuie sa faci 2 tabele pentru reverse index si ca nu e mare lucru, nu trebuie sa fii avansat, orice incepator e in stare s-o faca. Tu interoghezi foarte bine baza de date, mai bine de atat nu prea se poate daca nu faci reverse index. Problema e ca baza de date nu e facuta sa fie interogata asa cum vrei tu. De fapt termenul de "baza de date" in sine e un termen mult prea avansat pentru singura tabela denormalizata pe care o ai acolo.

Later edit:
Acum am vazut mai atent ce ai facut acolo.
Daca vrei un "quick hack" scoate "order by" din query si baga "limit $startrow, 10" ca intr-adevar, tu incarci toate rezultatele in memorie.
Order by s-ar putea sa-l forteze sa gaseasca toate rezultatele ca sa le poarta sorta (depinde de cum e implementat in mysql).

Iti multumesc pentru ajutorul personal, puthre, nu credeam ca se poate rezolva. M-ai salvat de la o mare durere de cap.
Te recomand cu cea mai mare placere tuturor.

Citat:

---

Postat în original de zgabu

Iti multumesc pentru ajutorul personal, puthre, nu credeam ca se poate rezolva. M-ai salvat de la o mare durere de cap.
Te recomand cu cea mai mare placere tuturor.

---

Lol. Traisca limit. Am pus link ca cei care au aceeasi problema sa nu se mai streseze asa de mult pentru o rezolvare atat de simpla :)

ha, de-ar fi fost asa de simplu cu un limit!

Citat:

---

Postat în original de zgabu

ha, de-ar fi fost asa de simplu cu un limit!

---

Da' nu mai bine ii dai tu lu' puthre o bere si il lasi sa rezolve el problema? Fac pariu ca e o chestie de maxim 15 minute. Asa pe nevazute, nu facem decat sa cautam acul in carul cu fan.

Citat:

---

Postat în original de haos

Da' nu mai bine ii dai tu lu' puthre o bere si il lasi sa rezolve el problema? Fac pariu ca e o chestie de maxim 15 minute. Asa pe nevazute, nu facem decat sa cautam acul in carul cu fan.

---

A fost si bauta berea. :)

Citat:

---

Postat în original de puthre

A fost si bauta berea. :)

---

Lol, nici n-apucai bine sa zic ca deja o si baurati. Si cat a durat rezolvarea 10 sau 15 minute? :))

Haos, daca esti asa de meserias, te solicit cu niste sfaturi legate de woocommerce, in 15 min maxim ma rezolvi :D

Citat:

---

Postat în original de zgabu

Haos, daca esti asa de meserias, te solicit cu niste sfaturi legate de woocommerce, in 15 min maxim ma rezolvi :D

---

Pai tu nu stii ca meseriasii n-au niciodata timp. Asa ca, cine are timp, e invitatul meu sa-ti raspunda. :)