苏飞论坛

标题: 无法正常获取JSON数据，浏览器正常 [打印本页]

作者: thinkthinklook 时间: 2020-7-7 16:43
标题: 无法正常获取JSON数据，浏览器正常
大佬，我有一个地址：http://113.57.190.228:8001/Web/R ... =2020-07-07+08%3A00 ，浏览器能打开，是JSON的数据，但为什么爬不到？请教！

作者: thinkthinklook 时间: 2020-7-7 17:08
HttpStatusCode ->PreconditionFailed

作者: clrscr 时间: 2020-7-9 16:31
简单来说,你用浏览器请求这个网址,获取到JS代码,浏览器解析运行JS代码,构造了新的请求,浏览器请求,显示出你需要的数据,(实际是俩次请求);而Helper类,只能模拟第一次请求,没有解析执行JS,构造新的请求去执行,所有没有第二次请求,就没有你需要的JSON数据;

作者: Homeless 时间: 2020-7-11 22:48
需要cookies才可返回json

作者: Loman源 时间: 2020-7-14 15:35
请求会判断你带不带ck，不带ck，加载js，计算ck，带上ck重新请求

作者: thinkthinklook 时间: 2020-7-22 16:56

Loman源发表于 2020-7-14 15:35
请求会判断你带不带ck，不带ck，加载js，计算ck，带上ck重新请求

他这个CK，应该怎么计算？

欢迎光临苏飞论坛 (http://www.sufeinet.com/)