我編寫的網(wǎng)絡(luò)應(yīng)用程序規(guī)模非常小，大部分時間僅供個人使用，因此數(shù)據(jù)庫大小和查詢時間對我來說從來都不是問題。我使用 InnoDB 數(shù)據(jù)庫類型，因為我習(xí)慣使用約束（ON DELETE CASADE），因為我排除了許多表中的許多信息并稍后將它們連接起來?，F(xiàn)在，我創(chuàng)建了一個 Web 應(yīng)用程序，每周通過 CSV 文件導(dǎo)入一次數(shù)據(jù)。文件大小有時大于 1 MB，行數(shù)超過 50.000。CSV 文件來自沒有 API 的舊應(yīng)用程序。訪問數(shù)據(jù)的唯一方法是將其導(dǎo)出為 CSV 并將其導(dǎo)入到我的應(yīng)用程序中。我只是通過 php 將 CSV 上傳到服務(wù)器，然后使用 php 將數(shù)據(jù)逐行添加到我的 MySQL 數(shù)據(jù)庫中。詳細(xì)來說，我將遍歷文件的每一行并執(zhí)行“INSERT INTO”查詢。因此，我在創(chuàng)建行和達(dá)到數(shù)據(jù)庫內(nèi)存限制（默認(rèn)值）時遇到了很大的加載時間。增加限制感覺就像做錯了什么，并且也會導(dǎo)致查詢時間過長。我可以做什么來提高數(shù)據(jù)庫的性能？編輯：它不能直接將 CSV 加載到 MySQL，因為我需要將內(nèi)容拆分到不同的表中。例如：CSV 有一個帶有types. 我創(chuàng)建了一個types表并將值添加到該表中，在主表中我只添加了 id。這樣我以后在 php 中就有了更多的靈活性，因為我不需要處理值名稱。我只能用 ids 來工作。另外，我做了類似“如果數(shù)字以 XY 開頭，則將值 Z 添加到 mysql 表中的特定列”之類的操作
2 回答
楊魅力
TA貢獻(xiàn)1811條經(jīng)驗 獲得超6個贊
如果文件中有數(shù)據(jù)，請使用load data infile.?這比一次插入一行數(shù)據(jù)要快得多。請注意，該文件需要在運(yùn)行 MySQL 的服務(wù)器上可訪問。對于個人應(yīng)用程序（可能在單臺計算機(jī)上運(yùn)行），這不應(yīng)該是問題。
我可能還建議將數(shù)據(jù)加載到臨時表中。然后從該表插入最終表。這使得處理傳入數(shù)據(jù)中的任何故障變得更加簡單。
達(dá)令說
TA貢獻(xiàn)1821條經(jīng)驗 獲得超6個贊
如果您需要在插入之前在 php 應(yīng)用程序中處理數(shù)據(jù)。您可以將多行組合成一條 INSERT 語句，這在 MySQL 中比每行一條 INSERT 語句要快得多。
$data = array(
array(
'title' => 'My title' ,
'name' => 'My Name' ,
'date' => 'My date'
),
array(
'title' => 'Another title' ,
'name' => 'Another Name' ,
'date' => 'Another date'
)
);
$this->db->insert_batch('mytable', $data);
// Produces: INSERT INTO mytable (title, name, date) VALUES ('My title', 'My name', 'My date'), ('Another title', 'Another name', 'Another date')
- 2 回答
- 0 關(guān)注
- 143 瀏覽
添加回答
舉報
0/150
提交
取消