手机
当前位置:查字典教程网 >脚本专栏 >python >python实现从web抓取文档的方法
python实现从web抓取文档的方法
摘要:本文实例讲述了Python实现从Web的一个URL中抓取文档的方法,分享给大家供大家参考。具体方法分析如下:实例代码如下:importurl...

本文实例讲述了Python实现从Web的一个URL中抓取文档的方法,分享给大家供大家参考。具体方法分析如下:

实例代码如下:

import urllib doc = urllib.urlopen("http://www.python.org").read() print doc#直接打印出网页 def reporthook(*a): print a #将http://www.renren.com网页保存到renre.html中, #每读取一个块调用一字reporthook函数 urllib.urlretrieve("http://www.renren.com",'renren.html',reporthook) #将http://www.renren.com网页保存到renre.html中 urllib.urlretrieve("http://www.renren.com",'renren.html')

程序运行结果如下:

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> ..........................网页内容 </body> </html> (0, 8192, -1) (1, 8192, -1) (2, 8192, -1)

其中urllib.urlopen返回一个类文件对象。

希望本文所述对大家的Python程序设计有所帮助。

【python实现从web抓取文档的方法】相关文章:

python脚本实现查找webshell的方法

python逐行读取文件内容的三种方法

python实现定制交互式命令行的方法

Python实现的几个常用排序算法实例

python处理文本文件实现生成指定格式文件的方法

python函数返回多个值的示例方法

Python实现全局变量的两个解决方法

浅析python 内置字符串处理函数的使用方法

Python通过解析网页实现看报程序的方法

用python实现批量重命名文件的代码

精品推荐
分类导航