欢迎访问服务器技术网-www.fuwuqijishu.com

5步骤Macbook环境完整安装python编程环境及Scrapy爬虫框架

运维 fuwuqijishu 2年前 (2022-09-04) 100次浏览 0个评论 扫描二维码

即便目前我们拿到手的新Macbook环境在终端输入python还是可以跳出来已经安装有python2.7版本自带环境,但是这个基本的环境只能完成简单的python基础函数的演练操作,并不能解决其他复杂的框架功能,我们需要在本有的基础上进行完善的补充安装常用的系统包。

因为我自己的环境是昨天晚上在MACBOOK安装的,当时没有截图,我今天这篇文章只能凭借记忆整理文字上的内容,但肯定是这样操作可以完成,包括最后我需要安装的Scrapy爬虫框架。

第一、检查和更新python环境

默认Macbook是带有python2.7版本的,所以我们认为不够新,可以到官方网站找到MAC系统的安装包,然后进行重新安装。

官方下载网站:https://www.python.org/download

因为考虑到一些环境的兼容支持,所以我不打算升级到python3.4版本,还是用2.7版本。

第二、安装pip工具包

这个必须安装,是基于python的管理工具包。

wget https://bootstrap.pypa.io/get-pip.py

用wget获取安装包,如果我们无法执行wget命令,则需要先查阅”Macbook系统环境安装wget的2个方法 – 传统包及Homebrew安装”把wget安装。

sudo python get-pip.py

然后执行安装命令。

第三、修改pip工具包源

因为pip包需要用到一些源,我们需要将换成国内的源,这样安装的时候才快一些。

cd ~
mkdir .pip
touch pip.conf

用编辑器将pip.conf打开,然后丢上下面的脚本

[global]
index-url = http://pypi.v2ex.com/simple

这里采用v2ex的地址。

第四、Pillow/PIL模块的安装

如果以后需要处理图片,还是也一起把Pillow/PIL模块安装。

sudo pip install -U Pillow

第五、安装Scrapy爬虫框架

sudo pip install Scrapy

爬虫框架安装直接输入就可以,记得要输入sudo,执行半天最后是一堆红色的错误提示脚本。

总结,到目前为止,我们就可以在Macbook中进行爬虫的演练,因为在本地演练方便,直接到VPS上操作文件效率不高,所以无论是MAC还是WINDOWS,都在本地安装和调试。

喜欢 (0)
发表我的评论
取消评论
表情 贴图 加粗 删除线 居中 斜体 签到

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址

Warning: error_log(/www/wwwroot/fuwiqijishu/wp-content/plugins/spider-analyser/#log/log-2117.txt): failed to open stream: No such file or directory in /www/wwwroot/fuwiqijishu/wp-content/plugins/spider-analyser/spider.class.php on line 2900