python檢查URL是否正常訪問的小技巧
更新時(shí)間：2017年02月25日 17:00:08 作者：程序猿全敏
檢查一個(gè)URL是否正常很容易，如果檢查2000個(gè)URL，或者是大批量的URL怎么辦？這篇文章就為大家介紹了python檢查URL是否正常訪問的小技巧，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下
今天，項(xiàng)目經(jīng)理問我一個(gè)問題，問我這里有2000個(gè)URL要檢查是否能正常打開，其實(shí)我是拒絕的，我知道因?yàn)橐獙懘a了，正好學(xué)了點(diǎn)Python，一想，python處理起來容易，就選了python，開始把思路想好：
1.首先2000個(gè)URL?？梢苑旁谝粋€(gè)txt文本內(nèi)
2.通過python 把內(nèi)容內(nèi)的URL一條一條放進(jìn)數(shù)組內(nèi)
3.打開一個(gè)模擬的瀏覽器，進(jìn)行訪問。
4.如果正常訪問就輸出正常，錯(cuò)誤就輸出錯(cuò)誤
直接簡(jiǎn)單粗暴甩代碼。因?yàn)樯婕暗诫[私，圖片打了碼
import urllib.request
import time
opener = urllib.request.build_opener()
opener.addheaders = [('User-agent', 'Mozilla/49.0.2')]
#這個(gè)是你放網(wǎng)址的文件名，改過來就可以了
file = open('test.txt')
lines = file.readlines()
aa=[]
for line in lines:
temp=line.replace('\n','')
aa.append(temp)
print(aa)
print('開始檢查：')
for a in aa:
tempUrl = a
try :
opener.open(tempUrl)
print(tempUrl+'沒問題')
except urllib.error.HTTPError:
print(tempUrl+'=訪問頁面出錯(cuò)')
time.sleep(2)
except urllib.error.URLError:
print(tempUrl+'=訪問頁面出錯(cuò)')
time.sleep(2)
time.sleep(0.1)
效果圖：
以上就是本文的全部?jī)?nèi)容，希望對(duì)大家的學(xué)習(xí)有所幫助，也希望大家多多支持腳本之家。
相關(guān)文章
Python本地cache不當(dāng)使用導(dǎo)致內(nèi)存泄露的問題分析與解決
最近在項(xiàng)目開發(fā)中遇到了本地cache不當(dāng)使用導(dǎo)致的一個(gè)內(nèi)存泄露問題,所以本文主要分析了問題出現(xiàn)的原因已經(jīng)解決方法,需要的小伙伴可以參考下2023-08-08
最近無事看到了電腦桌面又想到了最近入門的pyqt5,所以下面這篇文章主要給大家介紹了關(guān)于如何使用pyqt實(shí)現(xiàn)桌面歌詞功能的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),需要的朋友可以參考下2022-07-07
這篇文章主要為大家詳細(xì)介紹了如何利用python發(fā)送和接收郵件，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2016-09-09
Python Selenium常見的報(bào)錯(cuò)問題以及措施
這篇文章主要介紹了Python Selenium常見的報(bào)錯(cuò)問題以及措施,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2024-05-05
python 實(shí)現(xiàn)手機(jī)自動(dòng)撥打電話的方法(通話壓力測(cè)試)
今天小編就為大家分享一篇python 實(shí)現(xiàn)手機(jī)自動(dòng)撥打電話的方法(通話壓力測(cè)試)，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2019-08-08
本篇文章主要給大家詳細(xì)講述了Python核心對(duì)象類型之元組及文件的相關(guān)內(nèi)容，對(duì)此有興趣的學(xué)習(xí)下。2018-02-02
這篇文章主要介紹了python中xrange用法,實(shí)例分析了xrange的功能、作用以及與range在使用中的區(qū)別,具有一定參考借鑒價(jià)值,需要的朋友可以參考下2015-04-04
這篇文章主要介紹了pandas 層次化索引的實(shí)現(xiàn)方法，文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-07-07
pytorch加載語音類自定義數(shù)據(jù)集的方法教程
這篇文章主要給大家介紹了關(guān)于pytorch加載語音類自定義數(shù)據(jù)集的相關(guān)資料，文中通過示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-11-11
Python實(shí)戰(zhàn)之實(shí)現(xiàn)獲取動(dòng)態(tài)圖表
這篇文章主要介紹了利用Python實(shí)現(xiàn)動(dòng)態(tài)化圖表，文中的示例代碼介紹詳細(xì)，對(duì)我們的工作或?qū)W習(xí)有一定的價(jià)值，感興趣的同學(xué)可以學(xué)習(xí)一下2021-12-12