zoukankan      html  css  js  c++  java
  • 原创爬虫开源项目——更新维护

     

     

    前言

      已经有十几天没有更新文章了,但是这些天并没有闲着,状态和封面上的人一样,写代码和思考。。。

    最近事宜

      这些天主要干了些什么事情呢?这个必须要给大家说一下,不然大家以为我消失了呢。这些天一直在维护我github上的两个开源项目,一个是IPProxy(代理IP池),另一个是spider_smooc(慕课网视频抓取器,无需账号密码)。

    这两个项目都在博客园进行了说明:

    python开源IP代理池--IPProxys

    python爬虫:爬取慕课网视频

    IPProxys开源项目

      IPProxy代理池项目已经拥有60多star,这个项目对于爬虫开发者来说是非常有用的,如果你不想花钱买代理IP,这里面抓取到的免费代理IP还是能满足个人的需要。根据大家提出的问题,主要是修复了一些bug,加强了代理验证的功能,同时添加了一些新的代理网站。但是,抓取到的有用代理IP还是有些少,希望大家提供更多免费的代理IP网址。

    github:https://github.com/qiyeboy/IPProxys.

    如果你感兴趣,请给我更多的star.

    spider_smooc开源项目

      spider_smooc项目是当初为了快速下载慕课网视频,放到手机上观看的需求(不想在线看)。近期慕课网改变了解析方式,导致视频抓取器失效。本次进行了解析方式的更新,同时添加了使用说明图片。又可以无需账号密码,下载慕课网视频了。

    github:https://github.com/qiyeboy/spider_smooc

    如果你感兴趣,请给我更多的star.

    休息。。。心累


      这些天真心感觉到打江山容易,守江山难。但我会一如既往地支持开源,贡献我的思想和程序。。。

    如果大家觉得还可以呀,记得推荐呦。

    欢迎大家支持我公众号:

      
  • 相关阅读:
    e552. 取Applet的参数
    e551. 精简的Applet
    e558. 在Applet中多图片交互显示
    e1087. try/catch语句
    e1086. if/else语句
    e1087. 用For循环做数组的遍历
    e1084. 捕获错误和异常
    Zookeeper 应用程序
    Zookeeper API
    Java并发编程:volatile关键字解析
  • 原文地址:https://www.cnblogs.com/qiyeboy/p/6018594.html
Copyright © 2011-2022 走看看