首頁猿問如何高效安全地從一個大文件中截取部分信息

如何高效安全地從一個大文件中截取部分信息

JavaScript

慕虎7371278 2019-04-06 08:31:30

下午的時候有個同學(xué)問：他們服務(wù)器有一個5G的日志文件，如何從中截取出10.5-11.18的日志另一個文件日志文件有規(guī)范的時期格式，類似于web服務(wù)器日志。相關(guān)問題：對于catgrep這類linux命令，如果操作一個大文件會不會占用很大的內(nèi)存？

查看完整描述

2 回答

HUH函數(shù)

TA貢獻(xiàn)1836條經(jīng)驗(yàn) 獲得超4個贊

無論怎么樣你都必須使用某一個程序把這個文件讀出來，并且用一定的規(guī)則來加以過濾。在Linux中，使用cat和grep對文件進(jìn)行操作已經(jīng)可以說是最經(jīng)濟(jì)合理的了。占用一定的系統(tǒng)資源是肯定的，具體的話跟你使用的cat，grep以及l(fā)inux內(nèi)核都有一定關(guān)系，所以可能會略有不同。一般不要在系統(tǒng)里出現(xiàn)那么大的日志文件，最好在一開始就做好日志的大小限制以及合理的日志轉(zhuǎn)儲和備份。

反對回復(fù) 2019-04-06