【Python爬蟲】糗事百科數(shù)據(jù)段子采集
知識點(diǎn)
1.爬蟲基本步驟
2.requests模塊
3.parsel模塊
4.xpath數(shù)據(jù)解析方法
5.分頁功能
爬蟲基本步驟:
獲取網(wǎng)頁地址 (糗事百科的段子的地址)
發(fā)送請求
數(shù)據(jù)解析
保存 本地

爬蟲代碼
導(dǎo)入所需模塊
1.獲取網(wǎng)頁地址

2.發(fā)送請求
3.數(shù)據(jù)解析
4.保存數(shù)據(jù)
運(yùn)行代碼,得到數(shù)據(jù)


標(biāo)簽: