我想知道我是否錯誤地編寫了 Go 程序，或者我的服務(wù)器資源是否太小。我有以下代碼： spotXmlFile:='/var/www/html/app/public/xml/appdata.xml' xmlFile,err:=os.Open(spotXmlFile) defer xmlFile.Close() byteValue,_:=ioutil.ReadAll(xmlFile) var listings Listings xml.Unmarshal(byteValue,&listings)它處理一個 2.5GB 的 xml 文件。我正在aws ec2 t3.large嘗試處理數(shù)據(jù)，其中2 cpus有8GB mem有趣的是內(nèi)存不超過4GB，但CPU卻飆升至100%，然后導(dǎo)致程序失敗
1 回答
鴻蒙傳說
TA貢獻(xiàn)1865條經(jīng)驗 獲得超7個贊
您正在讀取內(nèi)存中的整個文件，然后對其進(jìn)行解組，這將使用您并不真正需要的大量額外內(nèi)存。試試這個，看看會發(fā)生什么：
spotXmlFile:='/var/www/html/app/public/xml/appdata.xml'
xmlFile,err:=os.Open(spotXmlFile)
defer xmlFile.Close()
var listings Listings
xml.NewDecoder(xmlFile).Decode(&listings)
使用解碼器，它將在讀取時解析和解組底層文件。
如果您只需要文件的一部分并且想要進(jìn)一步優(yōu)化它，您可以使用解碼器令牌逐個令牌對文件進(jìn)行解碼，并提取您需要的部分。
- 1 回答
- 0 關(guān)注
- 152 瀏覽
添加回答
舉報
0/150
提交
取消