我的畢業(yè)設(shè)計(jì)是做一個(gè)爬取豆瓣網(wǎng)站的系統(tǒng),我的同學(xué)的畢業(yè)設(shè)計(jì)是大數(shù)據(jù)方面的題目。我們的畢設(shè)老師要求我用爬蟲爬完數(shù)據(jù)后存儲(chǔ),然后做一個(gè)接口把數(shù)據(jù)傳給同學(xué)(數(shù)據(jù)從我的電腦傳到他的電腦上),他再用他搭建的平臺(tái)處理數(shù)據(jù)再展示出來(lái)。現(xiàn)在我的爬蟲系統(tǒng)做好了,他的平臺(tái)也搭建好了。請(qǐng)問(wèn)這之間傳數(shù)據(jù)的接口怎么設(shè)計(jì),要掌握哪些知識(shí)
問(wèn)大家一個(gè)python爬蟲和大數(shù)據(jù)的問(wèn)題
ibeautiful
2018-10-09 15:11:19