Python 用HTMLParser解析HTML文件


http://www.pythonclub.org/python-files/htmlparser

HTMLParser是Python自帶的模塊,使用簡單,能夠很容易的實現HTML文件的分析。
本文主要簡單講一下HTMLParser的用法. 

使用時需要定義一個從類HTMLParser繼承的類,重定義函數:

  • handle_starttag( tag, attrs)
  • handle_startendtag( tag, attrs)
  • handle_endtag( tag)

來實現自己需要的功能。

tag是的html標簽,attrs是 (屬性,值)元組(tuple)的列表(list). 
HTMLParser自動將tag和attrs都轉為小寫。

下面給出的例子抽取了html中的所有鏈接:

from HTMLParser import HTMLParser   class MyHTMLParser(HTMLParser): def __init__(self): HTMLParser.__init__(self) self.links = []   def handle_starttag(self, tag, attrs): #print "Encountered the beginning of a %s tag" % tag if tag == "a": if len(attrs) == 0: pass else: for (variable, value) in attrs: if variable == "href": self.links.append(value)   if __name__ == "__main__": html_code = """ <a href="www.google.com"> google.com</a> <A Href="www.pythonclub.org"> PythonClub </a> <A HREF = "www.sina.com.cn"> Sina </a> """ hp = MyHTMLParser() hp.feed(html_code) hp.close() print(hp.links)

輸出為:

['www.google.com', 'www.pythonclub.org', 'www.sina.com.cn']

如果想抽取圖形鏈接

<img src='http://www.google.com/intl/zh-CN_ALL/images/logo.gif' />

就要重定義 handle_startendtag( tag, attrs) 函數


免責聲明!

本站轉載的文章為個人學習借鑒使用,本站對版權不負任何法律責任。如果侵犯了您的隱私權益,請聯系本站郵箱yoyou2525@163.com刪除。



 
粵ICP備18138465號   © 2018-2025 CODEPRJ.COM