mysql Langsame Abfrage, um Post und Tags

Question

Ich habe drei Tabellen. eine, die Beiträge hält (postadata), eine, die Tags enthält (tag) und eine Verknüpfungstabelle (tag_data) Ich führe eine Abfrage, um alle Beiträge und ihre Tags mit der folgenden Abfrage verkettet zu bekommen.

SELECT 
     postdata.data_id as data_id, 
     GROUP_CONCAT(DISTINCT(tag.tag_id)) as tag_ids, 
     GROUP_CONCAT(DISTINCT(tag.tag) ORDER BY tag.tag ASC) as tags 
    FROM postdata 
    LEFT JOIN tag_data as tag_data 
      INNER JOIN tag as tag 
       ON tag_data.tag_id = tag.tag_id 
    ON postdata.data_id = tag_Data.data_id 
    GROUP BY postdata.data_id 
    LIMIT 1000 

Aber es ist sehr, sehr langsam. (ungefähr 20 Sekunden). Im Folgenden wird die erklären, kann ich nicht

1 SIMPLE postdata index NULL source_id 4 NULL   158808 Using index; Using temporary; Using filesort 
1 SIMPLE tag_data index PRIMARY PRIMARY  8 NULL   45279 Using index 
1 SIMPLE tag   eq_ref PRIMARY PRIMARY  4 tag_data.tag_id 1 

unten das Problem zu finden scheinen die Postdata-Indizes sind

postdata 0 PRIMARY  1 data_id  A 120405 NULL NULL  BTREE  
postdata 1 source_id 1 source_id A 168  NULL NULL  BTREE 

Ist es ein Problem mit der Abfrage? Gibt es eine Möglichkeit, es effizienter zu schreiben? Oder ist es ein fehlender Index?

UPDATE: Hinzufügen Index Info per jordeu Kommentare

SHOW TABLE STATUS VON [database_name] WHERE Name = 'postdata'

Name  Engine Version Row_format Rows Avg_row_length Data_length Max_data_length Index_length Data_free Auto_increment Create_time Update_time Check_time Collation Checksum Create_options Comment 
postdata InnoDB 10  Compact  158645 43    6832128  0    8421376   4194304  NULL   2012-03-08 09:22:40 NULL NULL utf8_unicode_ci NULL 

SHOW VARIABLES LIKE 'key_buffer_size'

key_buffer_size 16777216 

Answer 1

Wenn wie gesagt, die DISTINCT ist böse, könnten Sie die DISTINCT entfernen und sie so einzigartig machen e this:

$arr_tag_ids = array_unique(implode(',', $row->tag_ids)); 
$arr_tags = array_unique(implode(',', $row->tags)); 

Answer 2

Von Ihrem EXPLAIN sieht es so aus, als ob es keine INDEXe bei Ihrem ersten Beitritt verwendet. Dies kann daran liegen, dass Sie sowohl JOINs als auch beide ON-Bedingungen haben. Ich habe noch nie einen solchen JOIN gesehen. Versuchen Sie, das so zu ändern

SELECT 
    postdata.data_id as data_id, 
    GROUP_CONCAT(DISTINCT(tag.tag_id)) as tag_ids, 
    GROUP_CONCAT(DISTINCT(tag.tag) ORDER BY tag.tag ASC) as tags 
FROM postdata 
    LEFT JOIN tag_data as tag_data 
     ON postdata.data_id = tag_Data.data_id 
    LEFT JOIN tag as tag 
     ON tag_data.tag_id = tag.tag_id 
GROUP BY postdata.data_id 
LIMIT 1000 

Dann erneut ausführen EXPLAIN und sehen, ob es einen Unterschied macht. Brauchst du definitiv einen LEFT JOIN für den ersten JOIN? Wenn du das zu einem INNER JOIN änderst, hilft das vielleicht.

Answer 3

Es ist nicht notwendig, einen INNER JOIN nach einem LINKEN JOIN zu verwenden.

versuchen, diesen Ansatz:

SELECT 
    postdata.data_id as data_id, 
    GROUP_CONCAT(DISTINCT(tag.tag_id)) as tag_ids, 
    GROUP_CONCAT(DISTINCT(tag.tag) ORDER BY tag.tag ASC) as tags 
FROM postdata 
    LEFT JOIN tag_data as tag_data 
     ON postdata.data_id = tag_Data.data_id 
    LEFT JOIN tag as tag 
     ON tag_data.tag_id = tag.tag_id 
GROUP BY postdata.data_id 
LIMIT 1000 

Answer 4

das Problem sein kann, ist, dass Ihr Index in den Speicher passen nicht, diese langsam nach unten MySQL.

Ihre ‚key_buffer_size‘ zum Beispiel 160 MB erhöhen:

SET GLOBAL key_buffer_size = 167772160 

Wenn Sie InnoDB verwenden Sie auch erhöhen müssen ‚innodb_buffer_size‘ kann.