Python爬蟲爬取博客實(shí)現(xiàn)可視化過程解析
源碼:
from pyecharts import Bar
import re
import requests
num=0
b=[]
for i in range(1,11):
link='https://www.cnblogs.com/echoDetected/default.html?page='+str(i)
headers={'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.109 Safari/537.36'}
r=requests.get(link,headers=headers)
html=r.text
post=re.findall('<span class="post-view-count">(.*?)</span>',html)
for i in post:
i = i.replace("閱讀(", "")
i = i.replace(")","")
b.append(i)
num=num+1
columns=[]
for i in range(1,num+1):
#設(shè)置行名
columns.append('博客'+str(i))
#設(shè)置數(shù)據(jù)
#設(shè)置柱狀圖的主標(biāo)題與副標(biāo)題
bar = Bar("柱狀圖", "每個(gè)博客閱讀數(shù)量")
#添加柱狀圖的數(shù)據(jù)及配置項(xiàng),先行后列
bar.add("閱讀量", columns, b, mark_line=["average"], mark_point=["max", "min"])
#生成本地文件(默認(rèn)為.html文件)
bar.render()
爬蟲不是重點(diǎn),只是拿來爬閱讀數(shù)量,pyecharts是重點(diǎn)
這次爬的是我自己的博客,一共10頁,每頁10片文章,正好寫了100篇博客
pyecharts安裝:
pip install wheelpip install pyecharts==0.1.9.4
直接pip install pyecharts會(huì)下載最新版無法調(diào)用
注意點(diǎn):pyecharts調(diào)用,貌似無法實(shí)現(xiàn)多個(gè)py文件一起調(diào)用(意思是編寫時(shí)不能在多個(gè)文件里出現(xiàn)import語句)
步驟解釋:
1.爬蟲爬取閱讀數(shù)
2.去除非法字符裝入新的數(shù)組
3.設(shè)置橫軸數(shù)據(jù),生成柱狀圖
4.在當(dāng)前目錄下生成render.html,打開查看柱狀圖
結(jié)果:

柱狀圖是動(dòng)態(tài)的,不是靜態(tài)的

以上就是本文的全部內(nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持腳本之家。
相關(guān)文章
Python基于字典實(shí)現(xiàn)switch case函數(shù)調(diào)用
這篇文章主要介紹了Python基于字典實(shí)現(xiàn)switch case函數(shù)調(diào)用,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下2020-07-07
Python+tkinter使用40行代碼實(shí)現(xiàn)計(jì)算器功能
這篇文章主要為大家詳細(xì)介紹了Python+tkinter使用40行代碼實(shí)現(xiàn)計(jì)算器功能,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2018-01-01
Linux上Miniconda的安裝的實(shí)現(xiàn)步驟
Miniconda是一個(gè)輕量級(jí)、免費(fèi)且開源的跨平臺(tái)軟件包管理系統(tǒng),本文主要介紹了Linux上Miniconda的安裝的實(shí)現(xiàn)步驟,具有一定的參考價(jià)值,感興趣的可以了解一下2024-03-03

