[PHP & MySQL] Websites plat tijdens query

[Verwijderd]

Ik weet niet zeker of dit topic hier goed staat maar okee:

Ik draai op mn webserver om statistieken te genereren een query die 10 minuten duurt. (Huge tabellen en comparing zooi). Alleen tijdens deze query liggen alle websites op de server plat. Waarschijnlijk omdat ze niet meer bij de database kunnen omdat de query de volle capaciteit gebruikt.

Vraag is: Hoe los ik dit op? Als ik die statistieken in een aparte database zet, gaat het dan goed? Volgens het hosting-mannetje niet...

Is er een mogelijkheid om bij een query een max capaciteit mee te geven dat ie mag gebruiken bijvoorbeeld? Of is er in te stellen in MySQL (phpmyadmin) dat elke query maar een 25% van de capaciteit mag gebruiken oid?

Ik kan er helemaal niks over vinden.

Alvast bedankt!

[disjfa]

Niet de query draaien

Of anders gewoon optimaliseren.... Of een process ervan maken. Die kan je dan wat je zegt op de achtergrond laten draaien. Maar ik zou dan wel eerst even kijken waarom een query zo lang duurt. Wegmoffelen is natuurlijk geen oplossing

[mithras]

Zorgen dat je minder vaak de query draait of de query een performance boost geven? Is het echt nodig om het op deze manier te doen, oftewel: kan je de query niet uitsplitsen?

Verder maakt het afaik niet uit dat je een andere database gebruikt. De enige mogelijkheid is een virtual server waar de database als enige op staat. Dan kan je de virtual server beperken in de load van de host machine Maar dat gaat way too far voor jou probleem: eerst optimaliseren zou ik zeggen!

[ Voor 9% gewijzigd door mithras op 18-12-2007 09:37 ]

[DiedX]

wellicht een aparte instantie van die database op een andere poort, en daarop een beperking meegeven?

[Verwijderd]

SELECT * FROM statistieken2, statistieken
WHERE statistieken2.number_id = statistieken.number_id
AND statistieken.datetime < (statistieken2.datetime + 300)
AND statistieken.datetime > statistieken2.datetime
AND statistieken.type='OPROEP'
AND statistieken2.datetime > {$startdate} AND statistieken2.datetime < {$enddate}

statistieken2 heeft zo'n 400.000 records
statistieken heeft zo'n 100.000 records

[Verwijderd]

Ik zou natuurlijk kunnen uitsplitsen zodat ie 10.000 kleine queries of meer uitvoert.

Dan zouden andere queries ook tussendoor kunnen denkik?

[disjfa]

En dat doet er 10 minuten over

Zoek eens op indexeren

[TheRookie]

Je geeft niet aan wat je met "alle websites liggen plat" bedoeld: krijgen bezoekers een foutmelding te zien, een lege pagina, een time-out, of ..... ?

Welk formaat hebben je tabellen: InnoDB,MyISAM, ... ?

Verschillende tabel formaten hebben verschillende manieren van het locken van de tabellen; het zou zomaar kunnen zijn dat de sites "plat liggen" omdat de statistieken tabel (waar ze waarschijnlijk stats naar willen schrijven) volledig gelockt is.

[Verwijderd]

Plat liggen alsin: Pagina blijft laden maar er verschijnt niks... Totdat hij gewoon een standaard error geeft "deze pagina kan niet worden weergegeven".

Ze proberen niks naar de statistiekentabel te schrijven dus daar ligt het niet aan.
Type is MyISAM

Ik ga wel even kijken naar indexeren. Waarschijnlijk splijt ik alles op in kleine queries.

[DataGhost]

disjfa schreef op dinsdag 18 december 2007 @ 09:43:
En dat doet er 10 minuten over

Zoek eens op indexeren

Ik weet verder niet precies hoe snel het zou moeten gaan of wat je ingedachten hebt, maar

Verwijderd schreef op dinsdag 18 december 2007 @ 09:40:
SELECT * FROM statistieken2, statistieken
[...]
statistieken2 heeft zo'n 400.000 records
statistieken heeft zo'n 100.000 records

ik hoop dat je snapt dat je nu een query doet op een tijdelijke tabel met zo'n 40 miljard records? Als mijn kennis me niet in de steek laat Ik zou persoonlijk beginnen met je query omschrijven naar iets wat een JOIN gebruikt.

[Kettrick]

Laat eens een explain los op je query, dan weet je ongeveer wat er te lang duurt en wat je aan moet passen.

http://dev.mysql.com/doc/refman/5.0/en/explain.html

Vermoedelijk is het een kwestie van indexeren en goed joinen in je query

[André]

Move van WEB naar Programming