源码网商城,靠谱的源码在线交易网站 我的订单 购物车 帮助

源码网商城

使用Python抓取模板之家的CSS模板

  • 时间:2021-11-27 06:15 编辑: 来源: 阅读:
  • 扫一扫,手机访问
摘要:使用Python抓取模板之家的CSS模板
Python版本是2.7.9,在win8上测试成功,就是抓取有点慢,本来想用多线程的,有事就罢了。模板之家的网站上的url参数与页数不匹配,懒得去做分析了,就自己改代码中的url吧。大神勿喷!
[u]复制代码[/u] 代码如下:
#!/usr/bin/env python # -*- coding: utf-8 -*- # by ustcwq # 2015-03-15   import urllib,urllib2,os,time from bs4 import BeautifulSoup   start = time.clock() path = os.getcwd()+u'/模板之家抓取的模板/' if not os.path.isdir(path):     os.mkdir(path)   url = "http://www.cssmoban.com/cssthemes/index_80.shtml"    # 源网站中的index后面数字怎么编排的? theme_url ='http://www.cssmoban.com/cssthemes/' response = urllib2.urlopen(url) soup = BeautifulSoup(response) result = soup.select('p[class="title"] a') print result   for item in result:     link = item['href']     # down_name = item.text   # 文件名称     new_url = theme_url+link.split('/')[-1]     response = urllib2.urlopen(new_url)     soup = BeautifulSoup(response)     result = soup.select('.btn a')     down_url = result[1]['href']    # 文件链接       local = path+time.strftime('%Y%m%d%H%M%S',time.localtime(time.time()))+'.zip'     urllib.urlretrieve(down_url, local) # 远程保存函数   end = time.clock() print u'模板抓取完成!' print u'一共用时:',end-start,u'秒'
[img]http://files.jb51.net/file_images/article/201503/2015031614303915.jpg[/img] [img]http://files.jb51.net/file_images/article/201503/2015031614303916.jpg[/img] 以上所述就是本文的全部内容了,希望大家能够喜欢。
  • 全部评论(0)
联系客服
客服电话:
400-000-3129
微信版

扫一扫进微信版
返回顶部