请教一个爬虫的问题

• 请不要在回答技术问题时复制粘贴 AI 生成的内容

This topic created in 2416 days ago, the information mentioned may be changed or developed.

在爬一个网站把 header 参数，params 都写出来了，可还是爬不出来，不知道这网站有什么反爬技术。请大家看看，这是 ajax 网址： http://www.grainmarket.com.cn/centerweb/getData。这是网站：http://www.grainmarket.com.cn/centerweb/biddingFair/planDetail/2020033100167/G。麻烦各位大神帮我看看怎么获取他的最终数据。先谢谢大家了

反爬

params

header

ajax

15 replies • 2020-04-03 13:05:17 +08:00

mitu9527

Apr 3, 2020

你提交请求过去，漏了数据“param: {"m":"tradeCenterArea"}”。

zlfera

Apr 3, 2020

@mitu9527 都填了也没有用

different

Apr 3, 2020

@zlfera curl -d "param=%7B%22m%22%3A%22tradeCenterArea%22%7D" -H "Content-Type: application/x-www-form-urlencoded" -X POST http://www.g
rainmarket.com.cn/centerweb/getData

different

Apr 3, 2020

![微信截图_20200403115922.png]( https://i.loli.net/2020/04/03/IE23ewKVLkTGU5l.png)

azoon

Apr 3, 2020

试了一下，这个网站没有用任何反扒技术。

also24

Apr 3, 2020

试了下，啥都不用加就能访问的啊

https://i.loli.net/2020/04/03/ZVx9oL4OTezv6sD.png

different

Apr 3, 2020

curl -d "param=%7B%22m%22%3A%22tradeCenterPlanDetailInfo%22%2C%22requestNo%22%3A%222020033100167%22%2C%22flag%22%3A%22G%22%7D" -X POST http://www.grainmarket.com.cn/centerweb/getData

![微信截图_20200403120543.png]( https://i.loli.net/2020/04/03/XPpeGWMzcjBNZqJ.png)

哪有这么复杂，Referer，UA 都不用加，，，

zlfera

Apr 3, 2020

@different @azoon 我需要获取的是 params 是{"m":"tradeCenterPlanDetailInfo","requestNo":"2020032400286","flag":"G"}这里面的数据

zlfera

Apr 3, 2020

@also24 那些都不是我要的数据，我要的是参数是{"m":"tradeCenterPlanDetailInfo","requestNo":"2020032400286","flag":"G"}这里的数据

different

Apr 3, 2020

@zlfera 看到七楼了嘛？
把七楼的 2020033100167 换成 2020032400286

也就是 param: {"m":"tradeCenterPlanDetailInfo","requestNo":"2020033100167","flag":"G"}换成
param: {"m":"tradeCenterPlanDetailInfo","requestNo":"2020032400286","flag":"G"}

different

Apr 3, 2020

![微信截图_20200403121359.png]( https://i.loli.net/2020/04/03/osnm97dLOCSHYti.png)

also24

Apr 3, 2020

@zlfera #9
正如楼上所说，都一样的啊……

https://i.loli.net/2020/04/03/haM7kceX6xGvSPR.png

zlfera

Apr 3, 2020

谢谢大家的帮助，是我参数设置错误了，谢谢大家了

Supermanhh

Apr 3, 2020 via iPhone

@also24 #12 话说你门这用的都是什么软件啊

also24

Apr 3, 2020

@Supermanhh #14

@ different 是直接手写的 curl

我用的是 PAW https://paw.cloud/