1 up | 2 up | 3 up | 4 up | 5 up | 6 up | 7 up | 8 up | 9 up |
^^^ Additional posts ^^^
zorg.ch
#31372 by @ 05.05.2004 11:51 - nach oben -
Mit Query Cache:


# siege -u "http://www.zooomclan.org/forum.php"
** Siege 2.09
** Preparing 10 concurrent users for battle.
The server is now under siege...done
Transactions: 299 hits
Elapsed time: 60.19 secs
Data transferred: 5751526 bytes
Response time: 0.97 secs
Transaction rate: 4.97 trans/sec
Throughput: 95556.17 bytes/sec
Concurrency: 4.84
Successful transactions: 299
Failed transactions: 0



mysql> show status like "Qcache%";
+-------------------------+----------+
| Variable_name | Value |
+-------------------------+----------+
| Qcache_queries_in_cache | 173 |
| Qcache_inserts | 339 |
| Qcache_hits | 46190 |
| Qcache_lowmem_prunes | 0 |
| Qcache_not_cached | 315 |
| Qcache_free_memory | 16379336 |
| Qcache_free_blocks | 9 |
| Qcache_total_blocks | 360 |
+-------------------------+----------+
8 rows in set (0.00 sec)


Von 0.5 Trans/s auf 5 Trans/s.

InnoDB Support ist nun auch aktiviert, muesste man also mal ausprobieren.
zorg.ch
#31373 by @ 05.05.2004 11:54 - nach oben -
Slow Query Logging spuckt ab zu dieses Query aus:


# User@Host: zooomclan[zooomclan] @ localhost []
# Query_time: 18 Lock_time: 0 Rows_sent: 23 Rows_examined: 94517
SELECT user.clan_tag, user.username, c2.*, UNIX_TIMESTAMP(c1.date) as date, count(c1.id) as replies from comments as c2
left join comments as c1 on c1.id = c2.thread_id and c1.board = c2.board
left join user on c2.user_id = user.id group by c1.thread_id order by lastpost desc limit 0,23;


Dieses Query ist nicht indexed, d.h. er macht einen full table scan.
zorg.ch
#31387 by @ 05.05.2004 14:25 - nach oben -
merci, ich schau den mal an...
zorg.ch
#31417 by @ 05.05.2004 21:04 - nach oben -

mysql$ explain SELECT user.clan_tag, user.username, c2.*, UNIX_TIMESTAMP(c1.date) as date, count(c1.id) as replies from comments as c2
->
-> left join comments as c1 on c1.id = c2.thread_id and c1.board = c2.board
->
-> left join user on c2.user_id = user.id group by c1.thread_id order by lastpost desc limit 0,23;
+-------+--------+---------------+---------+---------+--------------+-------+---------------------------------+
| table | type | possible_keys | key | key_len | ref | rows | Extra |
+-------+--------+---------------+---------+---------+--------------+-------+---------------------------------+
| c2 | ALL | NULL | NULL | NULL | NULL | 31042 | Using temporary; Using filesort |
| c1 | eq_ref | PRIMARY,board | PRIMARY | 4 | c2.thread_id | 1 | |
| user | eq_ref | PRIMARY | PRIMARY | 4 | c2.user_id | 1 | |
+-------+--------+---------------+---------+---------+--------------+-------+---------------------------------+
3 rows in set (0.00 sec)

zorg.ch
#31481 by @ 06.05.2004 15:31 - nach oben -
das heisst dass er für c2 keinen Index hat?
da müsste ich so einen machen: (thread_id, board) ?
zorg.ch
#31487 by @ 06.05.2004 15:59 - nach oben -
Er macht, on disk (in /tmp, um genau zu sein) eine temporaere Tabelle. Kopiert den *GESAMTEN* Inhalt der comments Table da rein. Macht dann einen Fulltable-Scan auf diese temporaere Tabelle, und gibt irgendwann dann mal ein Resultat aus.

/tmp ist gluecklicherweise seit langem schon eine Ramdisk, sonst wuerde ein Query *wesentlich* laenger als ne Sekunde dauern.

Ich versteh allerdings nicht wirklich was du mit diesem Query erreichen willst, allerdings fuehrt er das nach Query-Log pro Pagehit aus ;)
zorg.ch
#31492 by @ 06.05.2004 16:22 - nach oben -
Weiss nicht mehr genau... ich glaube das mach ich, damit ich die Threads in der Forum-Übersicht nach deren Lastposts sortieren kann.
zorg.ch
#31496 by @ 06.05.2004 17:07 - nach oben -
Ich koennte die table mal kopieren, und schauen wie man das schneller machen kann.
zorg.ch
#31503 by @ 06.05.2004 19:02 - nach oben -
Dass er ne temp table macht scheint logisch... die Tabelle comments kommt 2x drin vor...
aber den filesort check ich nicht...
Hab jetzt nämlich 2 indexes gemacht: thread_id, board, lastpost und id, board, lastpost...
zorg.ch
#31504 by @ 06.05.2004 19:12 - nach oben -
Eine Temp Table hat logischerweise nie Indizes.

Das ist das, was ich mal hervorgebracht habe. Zusaetzliche Indizes bringen bei den Queries ueberhaupt nichts (Primary key id reicht fuer die ON statements). Das SQL_SMALL_RESULT fuehrt dazu, das temp tables im memory verwendet werden. Das bringt immerhin 0.25s (Also 1.5s statt 1.75s).

SELECT SQL_SMALL_RESULT
user.clan_tag,
user.username,
c2.*,
UNIX_TIMESTAMP(c1.date) AS date,
count(c1.id) AS replies
--
FROM comments AS c2
--
LEFT JOIN
comments AS c1 ON

c1.id = c2.thread_id
AND c1.board = c2.board
--
LEFT JOIN
user ON

c2.user_id = user.id
--
GROUP BY c1.thread_id
--
ORDER BY lastpost DESC
--
LIMIT 0,23;
zorg.ch
#31505 by @ 06.05.2004 19:35 - nach oben -
Ich könnte natürlich auch statt der Relation 23x ne Query machen mit Index. Vielleicht wärs ja schneller? Früher hatten wirs so...

Wenn diese Query die grosse Wüstheit ist, könnte man natürlich auch numreplies und die lastpost id in dem thread-record abspeichern.
Additional posts
zorg.ch
#31388 by @ 05.05.2004 14:26 - nach oben -
Query-Cache hast du jetzt eingestellt? Cool!
zorg.ch
#31414 by @ 05.05.2004 19:58 - nach oben -
Ja. Der bringt bei zooomclan.org zwar schon ziemlich was, aber bei den restlichen Kunden bringt er wesentlich mehr.

InnoDB muesst man mal ausprobieren.
zorg.ch
#31415 by @ 05.05.2004 20:03 - nach oben -
Vielleicht mal so noch ein paar Informationen:


| Com_replace | 99913 |
| Com_select | 64630 |
| Com_update | 1318 |
| Questions | 344739 |
| Qcache_queries_in_cache | 1091 |
| Qcache_inserts | 61502 |
| Qcache_hits | 173579 |
| Slow_queries | 32 |
| Sort_rows | 3482813 |
| Sort_scan | 3932 |
| Table_locks_immediate | 171790 |
| Table_locks_waited | 35 |


Com_replace und Com_update werden von UPDATE Statements ausgelloest. Da gibts irgendwelche Unterschiede. Com_select sind SELECT Statements, welche *NICHT* vom Query Cache behandelt wurden. Qcache inserts sind Querys die in den Qcache kamen, Qcache queries in cache ist die Anzahl Queries die derzeit im Query Cache sind.

Man sieht also, das sehr viel in die DB geschrieben wird, was dann natuerlich den Querycache ungueltig macht. Qcache hits sind die anzahl Queries die aus dem Cache beantwortet wurden. 170000/340000, also knapp die Haelfte. Das ist ja schonmal nicht schlecht. Slow queries sind Queries die laenger als 2s gedauert haben. Sort_scan ist die Anzahl full table scans -> Queries die keine Indices benutzen.