zoukankan      html  css  js  c++  java
  • python爬虫 selenium+phantomjs动态解析网页,加载页面成功,返回空数据

    废话不多说,直接说重点:

    刚开始做的时候,代理IP,头部信息池,都已经做好了,使用selenium+phantomjs获取js动态加载后的源码

    起初挺好的,能出来动态加载后的源码,但是运行了几次之后,电脑有点卡顿(估计是运存太小),源码就获取不到了,返回的数据

    都是空数据,以至于都是出错

    在做的时候一定要给页面加载之前做一个延时,以保证页面的正常加载出来,这样我们才能获取导数据

    我在加载前后都做了延时等待,当然,我这个就是说这个意思,没必要仿照

    可以根据自己的需求进行设置,然后源码就加载出来了,就是有点慢!

  • 相关阅读:
    防止头文件的重复包含问题
    git常用命令
    redis
    linux常用操作
    数据库安装
    mysql修改表结构
    mysql 忘记root密码及授权访问
    mysql连表查询
    mysql 存取ip方法
    php批量修改表结构
  • 原文地址:https://www.cnblogs.com/feifang/p/7118002.html
Copyright © 2011-2022 走看看