手机
当前位置:查字典教程网 >脚本专栏 >python >Python读取网页内容的方法
Python读取网页内容的方法
摘要:本文实例讲述了Python读取网页内容的方法。分享给大家供大家参考。具体如下:importurllib2#encoding=utf-8cla...

本文实例讲述了Python读取网页内容的方法。分享给大家供大家参考。具体如下:

import urllib2 #encoding = utf-8 class Crawler: def main(self): #req = urllib2.Request('http://www.baidu.com/') #req.add_header('User-Agent', 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10.6; rv:5.0)') #urllib2.socket.setdefaulttimeout(10) # 超时10秒 #page = urllib2.urlopen(req) page = urllib2.urlopen('http://www.google.com', timeout=10) data = page.read() print data print len(data) #计算字节长度 if __name__ == '__main__': me=Crawler() me.main()

希望本文所述对大家的Python程序设计有所帮助。

【Python读取网页内容的方法】相关文章:

python正则表达式修复网站文章字体不统一的解决方法

python批量导出导入MySQL用户的方法

python生成器的使用方法

python连接sql server乱码的解决方法

python操作MySQL数据库的方法分享

Python open读写文件实现脚本

python实现网页链接提取的方法分享

python两种遍历字典(dict)的方法比较

python赋值操作方法分享

Python 字符串操作方法大全

精品推荐
分类导航