python爬取分析超級大樂透歷史開獎數(shù)據(jù)第1/2頁
更新時間:2021年02月24日 15:11:12 作者:神拳小江南阿
這篇文章主要介紹了python爬取分析超級大樂透歷史開獎數(shù)據(jù),本次使用了requests和beautifulsoup庫進行數(shù)據(jù)的爬取,通過實例代碼給大家介紹的非常詳細,對大家的學習或工作具有一定的參考借鑒價值,需要的朋友可以參考下
博主作為爬蟲初學者,本次使用了requests和beautifulsoup庫進行數(shù)據(jù)的爬取
爬取網站:http://datachart.500.com/dlt/history/history.shtml —500彩票網
(分析后發(fā)現(xiàn)網站源代碼并非是通過頁面跳轉來查找不同的數(shù)據(jù),故可通過F12查找network欄找到真正儲存所有歷史開獎結果的網頁)
如圖:

爬蟲部分:
from bs4 import BeautifulSoup #引用BeautifulSoup庫
import requests #引用requests
import os #os
import pandas as pd
import csv
import codecs
lst=[]
url='http://datachart.500.com/dlt/history/newinc/history.php?start=07001&end=21018'
r = requests.get(url)
r.encoding='utf-8'
text=r.text
soup = BeautifulSoup(text, "html.parser")
tbody=soup.find('tbody',id="tdata")
tr=tbody.find_all('tr')
td=tr[0].find_all('td')
for page in range(0,14016):
td=tr
相關文章
Django-xadmin后臺導入json數(shù)據(jù)及后臺顯示信息圖標和主題更改方式
這篇文章主要介紹了Django-xadmin后臺導入json數(shù)據(jù)及后臺顯示信息圖標和主題更改方式,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2020-03-03
python使用socket制作聊天室詳細源碼(可以直接運行)
Python是一個非常靈活的編程語言,我們現(xiàn)在到處可見用Python編寫的應用程序,下面這篇文章主要給大家介紹了關于python使用socket制作聊天室的相關資料,文中的代碼可以直接運行,需要的朋友可以參考下2023-12-12
快速上手基于Anaconda搭建Django環(huán)境的教程
Django具有完整的封裝,開發(fā)者可以高效率的開發(fā)項目,Django將大部分的功能進行了封裝,開發(fā)者只需要調用即可,接下來通過本文給大家介紹基于Anaconda搭建Django環(huán)境的教程,需要的朋友可以參考下2021-10-10
在Pycharm中項目解釋器與環(huán)境變量的設置方法
今天小編就為大家分享一篇在Pycharm中項目解釋器與環(huán)境變量的設置方法,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧2018-10-10

