首頁猿問我正在使用...

我正在使用 beautifulsoup 抓取數(shù)據(jù)，但我沒有獲取所有數(shù)據(jù)

Html5

月關(guān)寶盒 2023-10-17 15:09:53

使用 python scraping 提取所有數(shù)據(jù)時出現(xiàn)問題from bs4 import BeautifulSoup import requests url = "https://www.worldometers.info/coronavirus/" req_data = requests.get(url) soup = BeautifulSoup(req_data.text, 'html.parser') table = soup.find('table', attrs={'id': 'main_table_countries_today'}) for row in table.findAll('tr', attrs = {'class':['odd','even','total_row']}): print(row.text)

查看完整描述

2 回答

哆啦的時光機(jī)

TA貢獻(xiàn)1779條經(jīng)驗獲得超6個贊

from bs4 import BeautifulSoup

import requests , csv

def SaveAsCsv(list_of_rows):

try:

print('\nSaving CSV Result')

with open('output.csv', 'a', newline='', encoding='utf-8') as outfile:

writer = csv.writer(outfile)

writer.writerow(list_of_rows)

print("rsults saved successully")

except PermissionError:

print("Please make sure output.csv is closed \n")

url = "https://www.worldometers.info/coronavirus/"

req_data = requests.get(url)

soup = BeautifulSoup(req_data.text, 'html.parser')

table = soup.find('table', attrs={'id': 'main_table_countries_today'})

header = [col_name.text.rstrip('\n').strip() for col_name in table.select('thead th')]

SaveAsCsv(header)

for row in table.select('tbody tr'):

tds = [td.get_text().rstrip('\n').strip() for td in row.select('td')]

SaveAsCsv(tds)

# print(row.text.rstrip('\n').strip())

反對回復(fù) 2023-10-17

嚕嚕噠

TA貢獻(xiàn)1784條經(jīng)驗獲得超7個贊

import requests

import pandas as pd

r = requests.get("https://www.worldometers.info/coronavirus/")

df = pd.read_html(r.content)

print(df)

反對回復(fù) 2023-10-17

2 回答
0 關(guān)注
134 瀏覽

關(guān)注

添加回答

舉報

0/150

提交

取消

使用 Ctrl+D 可將網(wǎng)站添加到書簽

微信客服

購課補(bǔ)貼
聯(lián)系客服咨詢優(yōu)惠詳情

幫助反饋 APP下載

慕課網(wǎng)APP
您的移動學(xué)習(xí)伙伴

公眾號

掃描二維碼
關(guān)注慕課網(wǎng)微信公眾號

第七色在线视频,2021少妇久久久久久久久久,亚洲欧洲精品成人久久av18,亚洲国产精品特色大片观看完整版,孙宇晨将参加特朗普的晚宴

熱搜

最近搜索清空

我正在使用 beautifulsoup 抓取數(shù)據(jù)，但我沒有獲取所有數(shù)據(jù)

我正在使用 beautifulsoup 抓取數(shù)據(jù)，但我沒有獲取所有數(shù)據(jù)

2 回答

添加回答

我正在使用 beautifulsoup 抓取數(shù)據(jù)，但我沒有獲取所有數(shù)據(jù)