手机
当前位置:查字典教程网 >脚本专栏 >python >Python使用bs4获取58同城城市分类的方法
Python使用bs4获取58同城城市分类的方法
摘要:本文实例讲述了Python使用bs4获取58同城城市分类的方法。分享给大家供大家参考。具体如下:#-*-coding:utf-8-*-#!/...

本文实例讲述了Python使用bs4获取58同城城市分类的方法。分享给大家供大家参考。具体如下:

# -*- coding:utf-8 -*- #! /usr/bin/python import urllib import os, datetime, sys from bs4 import BeautifulSoup reload(sys) sys.setdefaultencoding( "utf-8" ) __BASEURL__ = "http://bj.58.com/" __INITURL__ = "http://bj.58.com/hezu/" soup=BeautifulSoup(urllib.urlopen(__INITURL__)) lv1Elements = soup.html.body.section.find('div', 'relative').find('dl', 'secitem')('a',href=True) f=open('data.txt', 'w') for element in lv1Elements[1:]: f.write((element.get_text() + 'rn')) print element.get_text() url = __BASEURL__ + element.get('href') print url soup=BeautifulSoup(urllib.urlopen(url)) lv2Elements = soup.html.body.section.find('div', 'relative').find('dl', 'secitem').find('div', 'subarea').find_all('a') texts = [t.get_text() for t in lv2Elements] f.write(' '.join(texts) + 'rnrn') f.close()

希望本文所述对大家的Python程序设计有所帮助。

【Python使用bs4获取58同城城市分类的方法】相关文章:

python实现问号表达式(?)的方法

Python httplib,smtplib使用方法

Python编写检测数据库SA用户的方法

Python中使用动态变量名的方法

python读取注册表中值的方法

wxpython中利用线程防止假死的实现方法

python中精确输出JSON浮点数的方法

Python生成随机数的方法

Python中使用中文的方法

python回调函数的使用方法

精品推荐
分类导航