windows7系统+python2.7环境下安装pyspider
最近因为好奇,想学习写爬虫,了解到比较常用的爬虫框架是pyspider和scrapy,经过比较决定学习pyspider,但是在网上找的资源说的都不明不白,感觉不像是自己亲自安装的,像是到处抄的,今天终于安装成功,所以就写一篇博客,记录下来,给有需要的人,也方便自己以后再次安装查阅废话不多说,下面开始安装第一步,安装好python从python官网下载python2.7,然后傻瓜式安装好,并且...
最近因为好奇,想学习写爬虫,了解到比较常用的爬虫框架是pyspider和scrapy,经过比较决定学习pyspider,但是在网上找的资源说的都不明不白,感觉不像是自己亲自安装的,像是到处抄的,今天终于安装成功,所以就写一篇博客,记录下来,给有需要的人,也方便自己以后再次安装查阅
废话不多说,下面开始安装
第一步,安装好python
从python官网下载python2.7,然后傻瓜式安装好,并且将python的安装目录配置环境变量
第二步 下载 pip-19.0.1.tar.gz (后面我提供的有下载链接) 将下载好的压缩包解压,然后cmd进入到小黑窗,进入到pip-9.0.1目录 cd D:\pip-19.0.1\pip-19.0.1
然后执行 python setup.py install
第三步 下载phantomjs,然后解压至一个目录(比较难下到,我翻墙才下到,文章结尾有下载链接),并将bin目录配置path环境变量
第四步:使用pip安装pyspider 在小黑窗下里 执行 pip install pyspider
注意这里可能有的电脑的小黑窗里仍然执行不了pip(我也不知道为什么),这时候可以进入到python安装目录的scripts目录下执行,在上面地址栏cmd之后再执行 pip install pyspider
第五步 启动pyspider
在小黑窗执行 pyspider all
第六步 查看是否安装成功
在浏览器中输入http:\\localhost:5000
,如果安装成功,会返回一个页面如下
注意点 1.如果直接win+r进入小黑窗有的命令执行不了(这种情况比较少,但是我遇到了),可以进入要执行的目录下再cmd执行命令
2.下载 phantomjs 的压缩包会比较慢,甚至下载失败,因为没法翻墙,这时候就需要翻墙后,然后下载了,还好,我这里提供一个我下载好的,存在百度网盘,附上链接,如果链接失效了,可以在这里给我留言,我会发给你 。
pip-19.0.1 链接:https://pan.baidu.com/s/17pwtPw4tGZll_jNyVERDbw
提取码:szd4
phantomjs 链接:https://pan.baidu.com/s/1ckVBOiZVCkAmUvu7HGk_ww
提取码:nkvw
3.记得一定要在启动pyspider之后再用浏览器访问哦,否则看不到返回结果,会以为安装错了
如果对以上还有什么疑问,可以给我留言,欢迎交流。
更多推荐
所有评论(0)