擁有一個(gè) Golang 實(shí)用程序，能夠減少包含歷史數(shù)據(jù)的表中每天的數(shù)據(jù)點(diǎn)。記錄范圍為每天 20 到 400 條記錄。總共至少有1億條記錄。該實(shí)用程序能夠在給定日期之前將其減少到每天 n 條記錄。（n 的范圍可以是每天 1 到 300 條記錄）我使用的方法如下：步驟1：創(chuàng)建表 main_table_tmp 像 main_table;第2步：更改表 main_table_tmp 添加列 timekey INT；步驟 3：INSERT INTO main_table_tmp SELECT * FROM ( SELECT *,FLOOR(UNIX_TIMESTAMP(column_name)/((1440/2)*60)) AS timekey FROM main_table WHERE column_name <= '2018-01-01' GROUP BY timekey) m UNION ALL (SELECT * ,0 As timekey FROM main_table where column_name > 'date') ;步驟4：更改表 main_table_tmp 刪除列時(shí)間鍵；DROP TABLE 維護(hù)表；將表 maintable_tmp 重命名為 maintable；我正在使用 golang 實(shí)現(xiàn)上述目標(biāo)。func somefuncname(){ ---- ---- ---- q := "CREATE TABLE " + *tablename + "_tmp LIKE " + *tablename + ";" rows, err := db.Query(q) if err != nil { fmt.Println(err) }//--ALTER ADD timekey//--INSERT INTO SELECT *....//--ALTER DROP timekey ,DROP table and rename}當(dāng)前該查詢的響應(yīng)時(shí)間非常慢部分結(jié)果： 總記錄： 200 萬(wàn)條執(zhí)行時(shí)間： 180 秒這是在 16Gb RAM CPU 上部署在低等級(jí)系統(tǒng)上時(shí)非常慢我為解決此問(wèn)題所采取的步驟：查看了所有表的索引。嘗試刪除索引并運(yùn)行該實(shí)用程序。刪除索引使實(shí)用程序加快了 5 秒，但這也不算多。分階段執(zhí)行實(shí)用程序：如果總記錄超過(guò) 100 萬(wàn)條，則一次運(yùn)行 100 萬(wàn)條實(shí)用程序但畢竟這些努力看起來(lái)主要問(wèn)題在于查詢本身。只是速度不夠快。我只是需要一種方法來(lái)提高查詢效率任何幫助表示贊賞，謝謝大家?。?
提高涉及聯(lián)合的 MYSQL QUERY 的性能
哆啦的時(shí)光機(jī)
2023-06-26 17:00:14
