utang112501 发表于 2017-8-16 12:04:22

网站源代码中没有采集的内容-该怎么采集

比如这个网站https://www.forever21.com/us/shop/Catalog/Category/girls/girls_tops   我要采集的产品，源代码里面找不到。

后来我用抓包工具FD分析得出的真实网站是https://www.forever21.com/us/shop/Catalog/GetProducts

我在FD里面能看到内容，但是输入浏览器里面却没有内容显示，这种该怎么采集？求指教。。谢谢


file:///D:\qq\594850871\Image\C2C\0~NTO_D%OIQ6{LGOVBDLA2X.jpgfile:///D:\qq\594850871\Image\C2C\0~NTO_D%OIQ6{LGOVBDLA2X.jpg

file:///D:\qq\594850871\Image\C2C\0~NTO_D%OIQ6{LGOVBDLA2X.jpg

leweizxl 发表于 2017-8-16 14:04:59

post网址做post网址设置
http://www.locoy.com/index/guide#POST网址获取.html

utang112501 发表于 2017-8-16 16:31:29

leweizxl 发表于 2017-8-16 14:04
post网址做post网址设置
http://www.locoy.com/index/guide#POST网址获取.html

我的POST后面的那个链接https://www.forever21.com/us/shop/Catalog/GetProducts用浏览器打开是空白的。。

用FD抓到的数据包是这种类型的该怎么设置：
{"brand":"girls","category":"girls_tops","page":{"pageNo":"1","pageSize":"120"},"filter":{"sizeList":[],"colorList":[],"price":{"minPrice":0,"maxPrice":250},"manualList":[]},"sort":{"sortType":""},"count":{"products":""},"soldout":{"Brand":"","DisplayName":"","ListPrice":"","ProductId":"","Variants":[],"selectedColorNameOOS":"","selectedColorOOS":"","selectedSizeNameOOS":"","selectedSizeOOS":""},"landing":{}}

leweizxl 发表于 2017-8-16 17:29:05

utang112501 发表于 2017-8-16 16:31
我的POST后面的那个链接https://www.forever21.com/us/shop/Catalog/GetProducts用浏览器打开是空白的 ...

直接做post设置先找下分页
页: [1]
查看完整版本: 网站源代码中没有采集的内容-该怎么采集