Python 爬虫，<span> ...</span>中间的京东商品价格

Question

如题目所示，页面信息如下可以获得商品名称，但是价格是空的，用了好几种方法。

import requests
from lxml import etree
from lxml import html


import urllib.request
from bs4 import BeautifulSoup

url = "https://item.jd.com/5056201.html"
page = requests.get(url)
tree = html.fromstring(page.text)
selector = etree.HTML(page.text)

ProductNameP = '/html/body/div[5]/div/div[2]/div[1]/text()'
Name = selector.xpath(ProductNameP) #获得字符串
print(Name)

ProductPriceP ='/html/body/div[5]/div/div[2]/div[3]/div/div[1]/div[2]/text()'
Price = selector.xpath(ProductPriceP)

Answer 1

price = selector.xpath("//span[@class='price']/text()")

是 JS 渲染的

抓这个链接

Answer 2

商品的价格是通过js请求接口渲染的

Answer 3

你可以利用浏览器的F12监控network下的请求，可以找到价格的请求，不同商品的价格是利用不同的id请求的，所以...

Answer 4

直接selenium+bs4解析多爽，干嘛还用这个呢

Answer 5

xpath该这么写："//span[@class='price J-p-5056201']/text()|//span[@class='price J-p-p-5056201']/text()"