Scrapy爬虫框架安装

/ 技术 / 无站内评论 / 303浏览

入门教程:https://sanii.cn/article/153

不了解python?没事:https://sanii.cn/search/python

环境

win7+Python3.5

Scrapy官网

安装的所有依赖文件:链接:https://pan.baidu.com/s/1i4HVunj   密码:vz8v

最新依赖文件,新增图片下载器依赖:

链接: https://pan.baidu.com/s/15nft1g_rp5tlps_OKaUQHA 密码: c9zz

文件

python64 32位,选择一个即可。我选择的是64的,依赖文件也是针对64位。

如果想装32,还要专门去找32位的依赖。

whl文件为依赖文件。

安装

首先安装python 64bit

通过pip install Scrapy直接安装,一般会报错:error: Unable to find vcvarsall.bat 
网上的解决办法有2种:

这里果断选择了方法一,毕竟方法一的安装包小还方便,步骤如下:

https://www.lfd.uci.edu/~gohlke/pythonlibs/  这里下载依赖库,但是要在下载前查询看Py版本是否对应,Scrapy版本是否对应。

pip异常

如果以前装过python老版本,会提示如上:

cmd执行命令:python -m pip install --upgrade pip

如失败执行:easy_install.exe pip=x.x.x(更换x.x.x为所需版本)

测试

安装完毕后,输入Scrapy。以下界面即安装成功。


召唤蕾姆
琼ICP备18000156号

鄂公网安备 42011502000211号