現(xiàn)在有個需求,將多組日志(每組日志文件包含多個日志,每個日志20M)合并成一個,按照日志內(nèi)容中的時(shí)間戳排序后,生成一組日志文件(每個日志100m)。原有數(shù)據(jù)格式為:[URL][時(shí)間戳]我目前的想法有兩種,一種是將所有日志都存到內(nèi)存里然后排序。另外一種是讀一段排一段,咨詢了下別人,說有相關(guān)的多文件排序算法,所以想請教下。有沒有簡單的框架或者排序算法。
如何將多組日志文件合并成一組
冉冉說
2019-04-10 20:47:57