 |
1
locusxt Sep 4, 2018 via Android
顺着这个 href 接着爬就可以了
|
 |
2
toono Sep 4, 2018
我之前的做法就是分析他们的 API
|
 |
3
wylwang OP 这个问题已经困了我一周，查了挺多资料，还是没办法，求大佬支招
|
 |
4
syahd Sep 4, 2018 via Android
if 返回码＝＝ 3xx 跟着跳转
|
 |
5
bmos Sep 4, 2018
首先和 1 楼说的，顺着 href 爬。
不行的话看看是不是需要 cookie，我之前提问过，有的网站需要判断 cookie 值，没有的话，就会要求 js 跳转，有 cookie 就可以直接访问。 还有其他措施，要具体分析 |
 |
6
crazycabbage Sep 4, 2018 via iPhone
返回链接继续爬，遇到 js 生成页面用 splash，不要用 selenium
|
 |
7
uwh0am1 Sep 4, 2018
splash 把，使用 qt 中的 webview 加载页面，可以运行页面中的 js 代码，使用简单
|
 |
9
encro Sep 4, 2018
如果只是这个，正则匹配下 url 继续爬啊
|
 |
12
huaerxiela Sep 4, 2018
既然是无限循环的情况，可能是服务器验证有问题，要么你代码请求不规范，要么就是被反爬拦截了，排除代码问题后，着重看 cookie 变化或者 js 加密参数的情况
|
 |
13
frankyxu Sep 4, 2018
5 楼说的有道理，可能是你没带 cookie 访问，我最近刚好也遇到了这个问题，带上 cookie 就好了
|
|
15
wylwang OP @huaerxiela 是的，是因为没带 cookie，已经解决了，:)
|
 |
16
testsec Sep 4, 2018 via iPhone
一般这种是要带上 cookie 去访问的
|
 |
17
hjzkenan Sep 4, 2018
啥网站呀，贴出来看看？
|
|
18
wylwang OP |
 |
20
yangyaofei Sep 25, 2018
@wylwang 同样这个网站出这个问题,我发现直接用 requests 就可以...所以....这是为啥...
|
Select Language