cURL与本地浏览器抓取百度搜索结果不同...
事例链接:https://www.baidu.com/s?wd=si...
CURLOPT_USERAGENT什么的和HEADER设置过了,还是没有用...
建议如下:
采用Chrome或者Firefox访问要抓取的链接,打开开发者控制台,切换到网络面板
刷新页面,然后在记录下的网络请求上右键点击,菜单中选择Copy as cURL
然后就可以看到浏览器中使用的各种请求参数和头信息了,然后和你自己用curl请求的参数比对一下。
可用信息太少
怎么个不一样法?至少也要多贴些信息啊