本人用的hive,可以理解為關(guān)系型數(shù)據(jù)庫,現(xiàn)在的需求是,有一塔數(shù)據(jù),數(shù)據(jù)中都有手機(jī)號,我需要看看這一沓數(shù)據(jù)中有哪些是數(shù)據(jù)里已經(jīng)有了的。目前我的做法是,先取一條,然后按照手機(jī)號遍歷整張表,然后下一條,遍歷,下一條,遍歷。。。。。。我覺得此法即使加了索引效率也很低,求一個效率高的sql,或者思路
【數(shù)據(jù)庫】我需要一個查重效率高的方法
慕田峪9158850
2018-07-17 11:14:38