Python 用HTMLParser解析HTML文件

上一篇 / 下一篇  2014-09-01 15:48:17 / 个人分类:python

HTMLParserPython自带的模块,使用简单,能够很容易的实现HTML文件的分析。
本文主要简单讲一下HTMLParser的用法. 

使用时需要定义一个从类HTMLParser继承的类,重定义函数:

  • handle_starttag( tag, attrs)
  • handle_startendtag( tag, attrs)
  • handle_endtag( tag)

来实现自己需要的功能。

tag是的html标签,attrs是 (属性,值)元组(tuple)的列表(list). 
HTMLParser自动将tag和attrs都转为小写。

下面给出的例子抽取了html中的所有链接:

fromHTMLParserimportHTMLParser classMyHTMLParser(HTMLParser):def__init__(self):HTMLParser.__init__(self)self.links=[] defhandle_starttag(self, tag, attrs):#print "Encountered the beginning of a %s tag" % tagiftag =="a":iflen(attrs)==0:passelse:for(variable, value)inattrs:ifvariable =="href":self.links.append(value) if__name__ =="__main__":
    html_code ="""
    <a href="www.google.com"> google.com</a>
    <A Href="www.pythonclub.org"> PythonClub </a>
    <A HREF = "www.sina.com.cn"> Sina </a>
    """hp = MyHTMLParser()hp.feed(html_code)hp.close()print(hp.links)

输出为:

['www.google.com', 'www.pythonclub.org', 'www.sina.com.cn']

如果想抽取图形链接

<img src='http://www.google.com/intl/zh-CN_ALL/images/logo.gif' />

就要重定义 handle_startendtag( tag, attrs) 函数


TAG: Python python htmlparse

 

评分:0

我来说两句

日历

« 2024-04-06  
 123456
78910111213
14151617181920
21222324252627
282930    

数据统计

  • 访问量: 37122
  • 日志数: 28
  • 建立时间: 2014-07-17
  • 更新时间: 2015-03-19

RSS订阅

Open Toolbar