python中HTMLParser模塊知識點(diǎn)總結(jié)
本章內(nèi)容,我們主要來講一下Python內(nèi)置的HTML解析庫HTMLParser模塊,基本上也是應(yīng)用于頁面抓取上,假設(shè),我們需要去收集頁面上已存在的靜態(tài)鏈接,但是頁面肯定代碼量都非常大,并且頁面也很多,這樣看來,會比較麻煩,工作量也非常大,這個時候,我們就可以用到htmlparser模塊,一起來了解具體使用內(nèi)容。
安裝:
npm install htmlparser
htmlparser提供構(gòu)造函數(shù):
function Parser(handler) {
this._handler = handler;
}
HTMLParser解析HTML:
from html.parser import HTMLParser
from html.entities import name2codepoint
class MyHTMLParser(HTMLParser):
def handle_starttag(self, tag, attrs):
print('<%s>' % tag)
def handle_endtag(self, tag):
print('</%s>' % tag)
def handle_startendtag(self, tag, attrs):
print('<%s/>' % tag)
def handle_data(self, data):
print(data)
def handle_comment(self, data):
print('<!--', data, '-->')
def handle_entityref(self, name):
print('&%s;' % name)
def handle_charref(self, name):
print('&#%s;' % name)
parser = MyHTMLParser()
parser.feed('''<html>
<head></head>
<body>
<!-- test html parser -->
<p>Some <a href=\"#\">html</a> HTML tutorial...<br>END</p>
</body></html>''')
HTML本質(zhì)上是XML的子集,但是HTML的語法沒有XML那么嚴(yán)格,大家也可以嘗試?yán)肏TMLParser解析HTML。
知識點(diǎn)擴(kuò)展:
常用方法介紹
l feed(data):主要用于接受帶html標(biāo)簽的str,當(dāng)調(diào)用這個方法時并提供相應(yīng)的data時,整個實(shí)例(instance)開始執(zhí)行,結(jié)束執(zhí)行close()。
l handle_starttag(tag, attrs): 這個方法接收Parse_starttag返回的tag和attrs,并進(jìn)行處理,處理方式通常由使用者進(jìn)行覆蓋,本身為空。
例如,連接的start tag是<a>,那么對應(yīng)的參數(shù)tag='a'(小寫)。attrs是start tag <>中的屬性,以元組形式(name, value)返回(所有這些內(nèi)容都是小寫)。
例如,對于<A http://www.baidu.com)]).
l handle_endtag(tag):跟上述一樣,只是處理的是結(jié)束標(biāo)簽,也就是以</開頭的標(biāo)簽。
l handle_data(data):處理的是網(wǎng)頁的數(shù)據(jù),也就是開始標(biāo)簽和結(jié)束標(biāo)簽之間的內(nèi)容。例如:<script>...</script>的省略號內(nèi)容
l handle_comment(data) ,處理注釋,<!-- -->之間的文本
l reset():將實(shí)例重置,包括作為參數(shù)輸入的數(shù)據(jù)進(jìn)行清空。
到此這篇關(guān)于python中HTMLParser模塊知識點(diǎn)總結(jié)的文章就介紹到這了,更多相關(guān)python中HTMLParser模塊是什么內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
到此這篇關(guān)于python中HTMLParser模塊知識點(diǎn)總結(jié)的文章就介紹到這了,更多相關(guān)python中HTMLParser模塊是什么內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
pyspark對Mysql數(shù)據(jù)庫進(jìn)行讀寫的實(shí)現(xiàn)
這篇文章主要介紹了pyspark對Mysql數(shù)據(jù)庫進(jìn)行讀寫的實(shí)現(xiàn),文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-12-12
python實(shí)現(xiàn)超簡單的視頻對象提取功能
這篇文章主要給大家介紹了關(guān)于利用python實(shí)現(xiàn)超簡單的視頻對象提取功能的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2018-06-06
python實(shí)現(xiàn)tree命令的使用示例
本文主要介紹了python實(shí)現(xiàn)tree命令的使用示例,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2023-09-09
基于django micro搭建網(wǎng)站實(shí)現(xiàn)加水印功能
這篇文章主要介紹了基于django micro搭建網(wǎng)站實(shí)現(xiàn)加水印功能,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2020-05-05
python pygame實(shí)現(xiàn)五子棋小游戲
這篇文章主要為大家詳細(xì)介紹了python pygame實(shí)現(xiàn)五子棋小游戲,文中示例代碼介紹的非常詳細(xì),具有一定的參考價值,感興趣的小伙伴們可以參考一下2019-06-06

