黑馬博學(xué)谷【季度鉑金會員】JavaEE
3】parse:?具模塊,提供許多URL處理?法,如拆分、解析、合并等。
【4】robotparser:識別?站的robots.txt?件,判斷哪些?站可以爬,哪些?站不可以爬,使?頻率較少。
發(fā)送請求
urlopen是request模塊中的?法,?于抓取?絡(luò)。
我們以代碼?例,我們抓取百度的?頁
# 調(diào)?urllib庫中的request模塊
import urllib.request
標(biāo)簽: