快捷導(dǎo)航

零基礎(chǔ)寫python爬蟲之抓取百度貼吧代碼分享

更新時(shí)間：2014年11月06日 08:52:17 投稿：hebedich

前面幾篇都是以介紹基礎(chǔ)知識為主，各位童鞋估計(jì)都在犯嘀咕了，你到底寫不寫爬蟲啊？？額，好吧，本文就給大家寫一個簡單的百度貼吧的python爬蟲代碼。

這里就不給大家廢話了，直接上代碼，代碼的解釋都在注釋里面，看不懂的也別來問我，好好學(xué)學(xué)基礎(chǔ)知識去！

# -*- coding: utf-8 -*-
#---------------------------------------
#   程序：百度貼吧爬蟲
#   版本：0.1
#   作者：why
#   日期：2013-05-14
#   語言：Python 2.7
#   操作：輸入帶分頁的地址，去掉最后面的數(shù)字，設(shè)置一下起始頁數(shù)和終點(diǎn)頁數(shù)。
#   功能：下載對應(yīng)頁碼內(nèi)的所有頁面并存儲為html文件。
#---------------------------------------
import string, urllib2
#定義百度函數(shù)
def baidu_tieba(url,begin_page,end_page):
    for i in range(begin_page, end_page+1):
        sName = string.zfill(i,5) + '.html'#自動填充成六位的文件名
        print '正在下載第' + str(i) + '個網(wǎng)頁，并將其存儲為' + sName + '......'
        f = open(sName,'w+')
        m = urllib2.urlopen(url + str(i)).read()
        f.write(m)
        f.close()
#-------- 在這里輸入?yún)?shù) ------------------
# 這個是山東大學(xué)的百度貼吧中某一個帖子的地址
#bdurl = 'http://tieba.baidu.com/p/2296017831?pn='
#iPostBegin = 1
#iPostEnd = 10

bdurl = str(raw_input(u'請輸入貼吧的地址，去掉pn=后面的數(shù)字：\n'))
begin_page = int(raw_input(u'請輸入開始的頁數(shù)：\n'))
end_page = int(raw_input(u'請輸入終點(diǎn)的頁數(shù)：\n'))
#-------- 在這里輸入?yún)?shù) ------------------
#調(diào)用
baidu_tieba(bdurl,begin_page,end_page)

以上就是python抓取百度貼吧的一段簡單的代碼，非常的實(shí)用吧，各位可以自行擴(kuò)展下。

您可能感興趣的文章:

相關(guān)文章

Python+Pygame實(shí)現(xiàn)簡單的單詞小游戲
語言是一種藝術(shù)，但是作為語言的基礎(chǔ)——詞匯，卻不像藝術(shù)那樣賞心悅目。不斷的記憶與復(fù)習(xí)，讓詞匯成為很多孩子在學(xué)習(xí)英語時(shí)，最難完全攻克的關(guān)卡。本文就來用Python制作一個簡單的英語單詞游戲吧
2023-03-03
Python可視化神器pyecharts繪制柱狀圖
這篇文章主要介紹了Python可視化神器pyecharts繪制柱狀圖，文章圍繞主題展開詳細(xì)的內(nèi)容介紹，具有一定的參考價(jià)值，需要的朋友可以參考一下
2022-07-07
各種Python庫安裝包下載地址與安裝過程詳細(xì)介紹(Windows版)
這篇文章主要介紹了Windows版的各種Python庫安裝包下載地址與安裝過程詳細(xì)介紹,本文給大家提供了windows版的各種Python庫安裝包下載地址等相關(guān)知識，非常不錯具有參考借鑒價(jià)值，需要的朋友可以參考下
2016-11-11
Python中的深拷貝和淺拷貝詳解
這篇文章主要介紹了Python中的深拷貝和淺拷貝詳解,本文講解了變量-對象-引用、可變對象-不可變對象、拷貝等內(nèi)容,需要的朋友可以參考下
2015-06-06
Python中的chr()函數(shù)與ord()函數(shù)解析
這篇文章主要介紹了Python中的chr()函數(shù)與ord()函數(shù)解析，具有很好的參考價(jià)值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教
2022-05-05
解決python的空格和tab混淆而報(bào)錯的問題
這篇文章主要介紹了解決python的空格和tab混淆而報(bào)錯的問題，具有很好的參考價(jià)值，希望對大家有所幫助。一起跟隨小編過來看看吧
2021-02-02
Python使用pyperclip庫操作剪切板
本文將介紹如何使用pyperclip庫來進(jìn)行剪切板操作,包括復(fù)制、粘貼文本和圖片,以及清空剪切板內(nèi)容等功能,具有一定的參考價(jià)值,感興趣的可以了解一下
2024-03-03
OpenCV圖像分割之分水嶺算法與圖像金字塔算法詳解
本文主要介紹了OpenCV中的分水嶺算法、圖像金字塔對圖像進(jìn)行分割的方法。文中的示例代碼講解詳細(xì)，對我們學(xué)習(xí)OpenCV有一定的幫助，需要的可以參考一下
2021-12-12
python 變量初始化空列表的例子
今天小編就為大家分享一篇python 變量初始化空列表的例子，具有很好的參考價(jià)值，希望對大家有所幫助。一起跟隨小編過來看看吧
2019-11-11
pytorch模型部署到onnx的詳細(xì)過程
這篇文章主要介紹了如何簡單的將pytorch模型部署到onnx,本文結(jié)合示例代碼給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下
2023-08-08