Python 用HTMLParser解析HTML文件
上一篇 /
下一篇 2014-09-01 15:48:17
/ 个人分类:python
HTMLParser是Python自带的模块,使用简单,能够很容易的实现HTML文件的分析。
本文主要简单讲一下HTMLParser的用法.
使用时需要定义一个从类HTMLParser继承的类,重定义函数:
handle_starttag( tag, attrs)
handle_startendtag( tag, attrs)
handle_endtag( tag)
来实现自己需要的功能。
tag是的html标签,attrs是 (属性,值)元组(tuple)的列表(list).
HTMLParser自动将tag和attrs都转为小写。
下面给出的例子抽取了html中的所有链接:
fromHTMLParserimportHTMLParser classMyHTMLParser(HTMLParser):def__init__(self):HTMLParser.__init__(self)self.links=[] defhandle_starttag(self, tag, attrs):#print "Encountered the beginning of a %s tag" % tagiftag =="a":iflen(attrs)==0:passelse:for(variable, value)inattrs:ifvariable =="href":self.links.append(value) if__name__ =="__main__":
html_code ="""
<a href="www.google.com"> google.com</a>
<A Href="www.pythonclub.org"> PythonClub </a>
<A HREF = "www.sina.com.cn"> Sina </a>
"""hp = MyHTMLParser()hp.feed(html_code)hp.close()print(hp.links)
输出为:
['www.google.com', 'www.pythonclub.org', 'www.sina.com.cn']
如果想抽取图形链接
<img src='http://www.google.com/intl/zh-CN_ALL/images/logo.gif' />
就要重定义 handle_startendtag( tag, attrs) 函数
相关阅读:
- 初试selenium用python做自动化测试 (zaza9084, 2014-7-18)
- 用python做自动化测试--对Java代码做单元测试 (2)-导入第三方jar包 (powertester, 2014-7-26)
- Python: file.seek (meimei0929, 2014-8-04)
- Python: file open (meimei0929, 2014-8-04)
- Python和Django在Windows上的环境搭建 (zm51testing, 2014-8-06)
- Python Selenium自动化(一)点击页面链接测试 (zm51testing, 2014-8-06)
- 使用Python Selenium进行自动化功能测试 (zm51testing, 2014-8-06)
- Python:list and dictionary (meimei0929, 2014-8-06)
- python中'\'的用法 (meimei0929, 2014-8-06)
- Python+Selenium自动化测试入门 (zaza9084, 2014-8-13)
收藏
举报
TAG:
Python
python
htmlparse