zoukankan      html  css  js  c++  java
  • Scrapy-Redis的安装和使用

    Scrapy-Redis是Scrapy的分布式扩展模块,有了它,我们就可以方便地实现Scrapy分布式爬虫的搭建。
    GitHub:https://github.com/rmax/scrapy-redis
    PyPI:https://pypi.python.org/pypi/scrapy-redis
    官方文档:http://scrapy-redis.readthedocs.io

    一、安装Scrapy-Redis

    pip3 install scrapy-redis

    也可以下载wheel文件安装https://pypi.python.org/pypi/scrapy-redis#downloads

    测试:
    import scrapy_redis #不报错即可

  • 相关阅读:
    绿色通道
    Banknotes
    旅行问题
    修剪草坪
    最大连续和
    动物园
    炮兵阵地
    涂抹果酱
    牧场的安排
    国王
  • 原文地址:https://www.cnblogs.com/xuyingzhong/p/9345815.html
Copyright © 2011-2022 走看看