前言

我國(guó)股票投資者數(shù)量為15975.24萬(wàn)戶, 如此多的股民熱衷于炒股,首先拋開炒股技術(shù)不說(shuō), 那么多股票數(shù)據(jù)是不是非常難找,找到之后是不是看著密密麻麻的數(shù)據(jù)是不是頭都大了?

今天帶大家爬取雪球平臺(tái)的股票數(shù)據(jù)

開發(fā)環(huán)境

• 解釋器版本: python 3.8

• 代碼編輯器: pycharm 2021.2

第三方模塊

• requests: pip install requests

• csv

爬蟲案例的步驟:

1.確定url地址(鏈接地址)
2.發(fā)送網(wǎng)絡(luò)請(qǐng)求
3.數(shù)據(jù)解析(篩選數(shù)據(jù))
4.數(shù)據(jù)的保存(數(shù)據(jù)庫(kù)(mysql\mongodb\redis), 本地文件)

爬蟲程序全部代碼

分析網(wǎng)頁(yè)

打開開發(fā)者工具，搜索關(guān)鍵字，找到正確url

導(dǎo)入模塊

請(qǐng)求數(shù)據(jù)

解析數(shù)據(jù)

翻頁(yè)

對(duì)比1、2、3頁(yè)數(shù)據(jù)url，找到規(guī)律

保存數(shù)據(jù)

運(yùn)行代碼，實(shí)現(xiàn)效果

數(shù)據(jù)可視化全部代碼

導(dǎo)入數(shù)據(jù)

讀取數(shù)據(jù)

可視化圖表

運(yùn)行代碼，效果展示