最近刚好在学习python + scrapy的爬虫技术,因为mac是自带python2.7的,所以安装3.5版本有两种方法,一种是升级,一种是额外安装3.5版本。
升级就不用说了,讲讲额外安装的版本吧~ ~ ~
因为python是有自带版本的,最开始安装的时候都会有一种“会不会冲突”的感觉。
其实安装3.5版本也就是在官网上直接下载之后安装,和普通的mac软件安装方式是一样的~ ~
https://www.python.org/downloads/release/python-353/
安装完成之后,不会覆盖原来的python,会在/图书馆/框架/Python.framework/版本/3.5/lib/python3.5文件中
在终端直接输入python会执行python2.7版本
python
Python 2.7.12(默认情况下,2016年6月29日,14:05:02)
(GCC 4.2.1兼容苹果准备LLVM 7.3.0 (clang-703.0.31)]>
python3
Python 3.5.3 (v3.5.3:1880cb95a742, 2017年1月16日,08:49:46)
(GCC 4.2.1(5666年苹果公司(Apple inc .)建立)准备(点3))>
pip3 -版本
皮普9.0.1从/图书馆/框架/Python.framework/版本/3.5/lib/python3.5/网站(python 3.5)
使用pip3安装scrapy
pip3安装Scrapy
这里的Scrapy一定要首字母大写,不然会在安装的过程中报错~ ~
收集scrapy
重试(重试(总=4,连接=没有阅读=没有重定向=None))连接破碎后的NewConnectionError (' & lt; pip._vendor.requests.packages.urllib3.connection。在0 x103aa2c88> VerifiedHTTPSConnection对象:未能建立一个新的连接:[Errno 61]连接拒绝“)”:/简单/scrapy/重试(重试(总=3,连接=没有阅读=没有重定向=None))连接破碎后的NewConnectionError (' & lt; pip._vendor.requests.packages.urllib3.connection。在0 x103aa29e8> VerifiedHTTPSConnection对象:未能建立一个新的连接:[Errno 61]连接拒绝“)”:/简单/scrapy/重试(重试(总=2,连接=没有阅读=没有重定向=None))连接破碎后的NewConnectionError (' & lt; pip._vendor.requests.packages.urllib3.connection。在0 x103aa2630> VerifiedHTTPSConnection对象:未能建立一个新的连接:[Errno 61]连接拒绝“)”:/简单/scrapy/重试(重试(总=1,连接=没有阅读=没有重定向=None))连接破碎后的NewConnectionError (' & lt; pip._vendor.requests.packages.urllib3.connection。在0 x103aa2f28> VerifiedHTTPSConnection对象:未能建立一个新的连接:[Errno 61]连接拒绝“)”:/简单/scrapy/重试(重试(总=0,连接=没有阅读=没有重定向=None))连接破碎后的NewConnectionError (' & lt; pip._vendor.requests.packages.urllib3.connection。在0 x103aa2be0> VerifiedHTTPSConnection对象:未能建立一个新的连接:[Errno 61]连接拒绝“)”:/简单/scrapy/无法找到一个版本满足要求scrapy(版本:)
没有找到匹配的分布scrapy 之前
安装成功之后,可以直接在终端上输入scrapy查看版本号及使用
Scrapy 1.4.0——没有活跃的项目
用法:
scrapy & lt; command>[选项][arg游戏)
可用命令:
台运行快速的基准测试
拿取使用Scrapy下载一个URL
genspider生成新的蜘蛛使用预定义的模板
runspider运行一个独立的蜘蛛(没有创建一个项目)
设置被设置值
shell交互刮控制台
startproject创建新项目
版本打印Scrapy版本
在浏览器视图中打开URL, Scrapy
【更多】更多可用命令运行时从项目目录
使用“scrapy & lt; command>- h”看到更多信息命令
在pycharm中是没有直接创建scrapy项目的,可以使用scrapy命令手动新建项目
scrapy startproject ArticleSpider (ArticleSpider为项目名称)
以上这篇mac安装scrapy并创建项目的实例讲解就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持。
