服务器之家

服务器之家 > 正文

python爬虫爬取淘宝商品信息

时间:2021-01-17 00:28     来源/作者:OliverkingLi

本文实例为大家分享了python爬取淘宝商品的具体代码,供大家参考,具体内容如下

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
import requests as req
import re
 
def getHTMLText(url):
 try:
 r = req.get(url, timeout=30)
 r.raise_for_status()
 r.encoding = r.apparent_encoding
 return r.text
 except:
 return ""
 
def parasePage(ilt, html):
 try:
 plt = re.findall(r'\"view_price\"\:\"[\d\.]*\"', html)
 tlt = re.findall(r'\"raw_title\"\:\".*?\"', html)
 for i in range(len(plt)):
  price = eval(plt[i].split(':')[1])
  title = eval(tlt[i].split(':')[1])
  ilt.append([price, title])
 except:
 print("")
 
 
def printGoodsList(ilt):
 tplt = "{:4}\t{:8}\t{:16}"
 print(tplt.format("序列号", "价格", "商品名称"))
 count = 0
 for j in ilt:
 count = count + 1
 print(tplt.format(count, j[0], j[1]))
 
def main():
 goods = "python爬虫"
 depth = 3
 start_url = 'https://s.taobao.com/search?q=' + goods
 infoList = []
 for i in range(depth):
 try:
  url = start_url + '&s=' + str(44*i)
  html = getHTMLText(url)
  parasePage(infoList, html)
 except:
  continue
 printGoodsList(infoList)
 
main()

效果图:

python爬虫爬取淘宝商品信息

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持服务器之家。

原文链接:http://blog.csdn.net/oliverkingli/article/details/78037864

标签:

相关文章

热门资讯

2020微信伤感网名听哭了 让对方看到心疼的伤感网名大全
2020微信伤感网名听哭了 让对方看到心疼的伤感网名大全 2019-12-26
Intellij idea2020永久破解,亲测可用!!!
Intellij idea2020永久破解,亲测可用!!! 2020-07-29
背刺什么意思 网络词语背刺是什么梗
背刺什么意思 网络词语背刺是什么梗 2020-05-22
苹果12mini价格表官网报价 iPhone12mini全版本价格汇总
苹果12mini价格表官网报价 iPhone12mini全版本价格汇总 2020-11-13
歪歪漫画vip账号共享2020_yy漫画免费账号密码共享
歪歪漫画vip账号共享2020_yy漫画免费账号密码共享 2020-04-07
返回顶部