首頁(yè) 猿問(wèn) 關(guān)于數(shù)據(jù)批量導(dǎo)入到數(shù)據(jù)庫(kù)

關(guān)于數(shù)據(jù)批量導(dǎo)入到數(shù)據(jù)庫(kù)

JavaScript

元芳怎么了 2019-05-15 10:38:04

想請(qǐng)教一下，大家平時(shí)做數(shù)據(jù)批量導(dǎo)入數(shù)據(jù)庫(kù)都是怎么做的，我現(xiàn)在數(shù)據(jù)量小，逐條導(dǎo)入感覺(jué)時(shí)間還可以接受，但是我在想數(shù)據(jù)量大的時(shí)候，這樣就不太好了，所以想看看大家平時(shí)都是處理這類問(wèn)題的

查看完整描述

2 回答

精慕HU

TA貢獻(xiàn)1845條經(jīng)驗(yàn) 獲得超8個(gè)贊

MYSQL有source導(dǎo)入如果逐條sql添加到數(shù)據(jù)庫(kù)會(huì)用很久用source效率會(huì)提升很多150W的數(shù)據(jù)不到1分鐘導(dǎo)入，效率差距

反對(duì) 回復(fù) 2019-05-15

SMILET

TA貢獻(xiàn)1796條經(jīng)驗(yàn) 獲得超4個(gè)贊

postgre有copy，直接批量導(dǎo)入。數(shù)據(jù)庫(kù)備份可以用pg_dump導(dǎo)出二進(jìn)制，然后pg_restore批量導(dǎo)入到其他庫(kù)中。假設(shè)pg_dump導(dǎo)出成單條sql，批量導(dǎo)入時(shí)間30分鐘。導(dǎo)出成二進(jìn)制，批量導(dǎo)入時(shí)間不到2分鐘，效率差距

反對(duì) 回復(fù) 2019-05-15