源码网商城,靠谱的源码在线交易网站 我的订单 购物车 帮助

源码网商城

使用python BeautifulSoup库抓取58手机维修信息

  • 时间:2021-12-08 06:06 编辑: 来源: 阅读:
  • 扫一扫,手机访问
摘要:使用python BeautifulSoup库抓取58手机维修信息
直接上代码:
[u]复制代码[/u] 代码如下:
#!/usr/bin/python # -*- coding: utf-8 -*- import urllib import os,datetime,string import sys from bs4 import BeautifulSoup reload(sys) sys.setdefaultencoding('utf-8') __BASEURL__ = 'http://bj.58.com/' __INITURL__ = "http://bj.58.com/shoujiweixiu/" soup = BeautifulSoup(urllib.urlopen(__INITURL__)) lvlELements = soup.html.body.find('div','selectbarTable').find('tr').find_next_sibling('tr')('a',href=True) f = open('data1.txt','a') for element in lvlELements[1:]:     f.write((element.get_text()+'\n\r' ))     url = __BASEURL__ + element.get('href')     print url     soup = BeautifulSoup(urllib.urlopen(url))     lv2ELements = soup.html.body.find('table','tblist').find_all('tr')     for item in lv2ELements:         addr = item.find('td','t').find('a').get_text()         phone = item.find('td','tdl').find('b','tele').get_text()         f.write('地址:'+addr +' 电话:'+ phone + '\r\n\r') f.close()
直接执行后,存在 data1.txt中就会有商家的地址和电话等信息。 BeautifulSoup  api 的地址为: http://www.crummy.com/software/BeautifulSoup/bs4/doc/
  • 全部评论(0)
联系客服
客服电话:
400-000-3129
微信版

扫一扫进微信版
返回顶部