您好, 欢迎来到 !    登录 | 注册 | | 设为首页 | 收藏本站

python爬虫爬取淘宝商品信息

5b51 2022/1/14 8:19:56 python 字数 3096 阅读 459 来源 www.jb51.cc/python

本文实例为大家分享了python爬取淘宝商品的具体代码,供大家参考,具体内容如下

概述

本文实例为大家分享了python爬取淘宝商品的具体代码,供大家参考,具体内容如下

import requests as req 
import re 
 
def getHTMLText(url): 
 try: 
 r = req.get(url,timeout=30) 
 r.raise_for_status() 
 r.encoding = r.apparent_encoding 
 return r.text 
 except: 
 return "" 
 
def parasePage(ilt,html): 
 try: 
 plt = re.findall(r'\"view_price\"\:\"[\d\.]*\"',html) 
 tlt = re.findall(r'\"raw_title\"\:\".*?\"',html) 
 for i in range(len(plt)): 
  price = eval(plt[i].split(':')[1]) 
  title = eval(tlt[i].split(':')[1]) 
  ilt.append([price,title]) 
 except: 
 print("") 
 
 
def printGoodsList(ilt): 
 tplt = "{:4}\t{:8}\t{:16}" 
 print(tplt.format("序列号","价格","商品名称")) 
 count = 0 
 for j in ilt: 
 count = count + 1 
 print(tplt.format(count,j[0],j[1])) 
 
def main(): 
 goods = "Python爬虫" 
 depth = 3 
 start_url = 'https://s.taobao.com/search?q=' + goods 
 infoList = [] 
 for i in range(depth): 
 try: 
  url = start_url + '&s=' + str(44*i) 
  html = getHTMLText(url) 
  parasePage(infoList,html) 
 except: 
  continue 
 printGoodsList(infoList) 
 
main() 

效果图:

@H_403_10@

更多内容请参考专题《python爬取功能汇总》进行学习。

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持编程小技巧。

总结

以上是编程之家为你收集整理的python爬虫爬取淘宝商品信息全部内容,希望文章能够帮你解决python爬虫爬取淘宝商品信息所遇到的程序开发问题。


如果您也喜欢它,动动您的小指点个赞吧

除非注明,文章均由 laddyq.com 整理发布,欢迎转载。

转载请注明:
链接:http://laddyq.com
来源:laddyq.com
著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。


联系我
置顶