热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

python爬虫_python爬虫selenium+phantomjs动态解析网页,加载页面成功,返回空数据

篇首语:本文由编程笔记#小编为大家整理,主要介绍了python爬虫selenium+phantomjs动态解析网页,加载页面成功,返回空数据相关的知识,希望对你有一定的参考价值。

篇首语:本文由编程笔记#小编为大家整理,主要介绍了python爬虫 selenium+phantomjs动态解析网页,加载页面成功,返回空数据相关的知识,希望对你有一定的参考价值。


废话不多说,直接说重点:

刚开始做的时候,代理IP,头部信息池,都已经做好了,使用selenium+phantomjs获取js动态加载后的源码

起初挺好的,能出来动态加载后的源码,但是运行了几次之后,电脑有点卡顿(估计是运存太小),源码就获取不到了,返回的数据

都是空数据,以至于都是出错

在做的时候一定要给页面加载之前做一个延时,以保证页面的正常加载出来,这样我们才能获取导数据技术分享

我在加载前后都做了延时等待,当然,我这个就是说这个意思,没必要仿照

可以根据自己的需求进行设置,然后源码就加载出来了,就是有点慢!


推荐阅读
author-avatar
Yx宵夜
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有