zoukankan      html  css  js  c++  java
  • Windows和Linux下scrapy框架的安装

    windows下安装:

    1.安装Anaconda环境管理工具

    也可以使用pip安装,值得注意的是如果你使用的是pip安装,你需要解决相应的包依赖(解决依赖一般会让你怀疑人生、怀疑scrapy,建议还是用Anaconda安装,少年!)

    Anaconda 下载地址:https://www.anaconda.com/download/    里面有不同的平台,不同的版本,根据您的平台进行下载即可!这里的话建议大家下载Anaconda全包,而不是Miniconda,因为后者虽然小巧,但会出现一些问题,如果你怕填坑就请下载Anaconda,500M左右,这里再说一点,python是不用安装的,当然装了也没关系!

    下载完成后可以开始傻瓜式安装,下一步下一步..... 下载路径这里注意不要带空格,

    Advanced Options这一步两个都勾选,第一个是加入环境变量,下面是默认安装python3.6为默认的python解释器,然后下一步下一步...,最后安装完成.

    2.安装scrapy

    安装完成后开始菜单中会出现Anaconda Navigator,点击启动Anaconda,稍等片刻,正在启动

    启动后点击左侧:Environments

    右侧有个not installed选项,未安装的包 , 在右侧搜索框输入scrapy

    选中搜索到的包,点击Apply安装, 出现安装依赖包,点击安装就可以了  

    Linux下安装:

    需要安装大量的依赖包(否则安装scrapy会报错),下面我把命令发出来,具体为什么安装这些,我就不解释了

    傻瓜式命令输入:

    yum -y install epel-release

    yum install python-pip -y

    pip install --upgrade pip

    yum install gcc -y

    yum install gcc libffi-devel python-devel openssl-devel -y

    pip install scrapy

    安装完成后打开命令行输入scrapy 如果不报错,安装就成功啦

    到这里安装教程就完了,声明本篇博客借鉴了scrapy中文网的内容,大家可以百度搜索一下 scrapy中文网,教程很基础,也很有意思

  • 相关阅读:
    I/O模型浅析
    (转)Linux中的文件描述符
    深入理解jQuery中的Deferred
    Windows安装docker (带安装包)
    windows 安装docker报错:Error checking TLS connection: ssh command error: command : ip addr show
    什么是负载均衡
    python把列表前几个元素提取到新列表
    Uncaught DOMException: Failed to construct 'WebSocket': The URL
    json中的json.dumps()
    将代码上传版本库gitee
  • 原文地址:https://www.cnblogs.com/lyxdw/p/9530025.html
Copyright © 2011-2022 走看看