基于Python爬取股票數(shù)據(jù)過程詳解
基本環(huán)境配置
python 3.6 pycharm requests csv time相關(guān)模塊pip安裝即可
目標(biāo)網(wǎng)頁
分析網(wǎng)頁
一切的一切都在圖里
找到數(shù)據(jù)了,直接請求網(wǎng)頁,解析數(shù)據(jù),保存數(shù)據(jù)
請求網(wǎng)頁
import requestsurl = ’https://xueqiu.com/service/v5/stock/screener/quote/list’response = requests.get(url=url, params=params, headers=headers, cookies=cookies)html_data = response.json()
解析數(shù)據(jù)
data_list = html_data[’data’][’list’]for i in data_list: dit = {} dit[’股票代碼’] = i[’symbol’] dit[’股票名字’] = i[’name’] dit[’當(dāng)前價(jià)’] = i[’current’] dit[’漲跌額’] = i[’chg’] dit[’漲跌幅/%’] = i[’percent’] dit[’年初至今/%’] = i[’current_year_percent’] dit[’成交量’] = i[’volume’] dit[’成交額’] = i[’amount’] dit[’換手率/%’] = i[’turnover_rate’] dit[’市盈率TTM’] = i[’pe_ttm’] dit[’股息率/%’] = i[’dividend_yield’] dit[’市值’] = i[’market_capital’] print(dit)
保存數(shù)據(jù)
import csvf = open(’股票數(shù)據(jù).csv’, mode=’a’, encoding=’utf-8-sig’, newline=’’)csv_writer = csv.DictWriter(f, fieldnames=[’股票代碼’, ’股票名字’, ’當(dāng)前價(jià)’, ’漲跌額’, ’漲跌幅/%’, ’年初至今/%’, ’成交量’, ’成交額’, ’換手率/%’, ’市盈率TTM’, ’股息率/%’, ’市值’])csv_writer.writeheader()csv_writer.writerow(dit)f.close()
以上就是本文的全部內(nèi)容,希望對大家的學(xué)習(xí)有所幫助,也希望大家多多支持好吧啦網(wǎng)。
相關(guān)文章:
1. 怎樣打開XML文件?xml文件如何打開?2. ASP中Server.HTMLEncode用法(附自定義函數(shù))3. 使用session upload_progress實(shí)現(xiàn)文件包含實(shí)例詳解4. adodb.recordset.open(rs.open)方法參數(shù)詳解5. ASP.Net MVC利用NPOI導(dǎo)入導(dǎo)出Excel的示例代碼6. asp文件如何打開7. ASP和PHP文件操作速度的對比8. ASP替換、保存遠(yuǎn)程圖片實(shí)現(xiàn)代碼9. WML教程之文本框控件Input10. ASP基礎(chǔ)入門第二篇(ASP基礎(chǔ)知識(shí))
