PYTHON爬虫所需的软件环境搭建

最近想对python爬虫所需的开发环境做一个总结，主要针对window系统和linux系统为例,这里非常推荐大家使用linux系统

（一）python和pip环境搭建

1.window系统

：去官 下载anaconda和pycharm，anaconda含有python中大多数的库。

2.linux系统

：在终端中输入安装python所需基本库

基本库安装完毕后，安装python3和pip

（二）MongoDB环境搭建

1.window系统：

为了启动mongodb方便，将mongod.exe路径加入环境变量，电脑->属性->高级系统设置->环境变量,在path里加入路径：

解析：mongod –dbpath 命令是创建数据库文件的存放位置，启动mongodb服务时需要先确定数据库文件存放的位置，否则系统不会自动创建，启动会不成功。

2.linux系统：

在终端中输入

然后在终端中输入mongo即可进入命令行交互模式

（三） redis环境搭建

1.linux系统：

输入

进入命令行
建立关系

输入退出命令行，继续在终端中输入

从而更改某些配置文件
在vi中找到bind 127.0.0.1
注释掉变为如图

（四） mysql环境搭建

1.linux系统：

#连接数据库

（五） 常见爬虫库

1.linux系统：

先安装

然后

文章知识点与官方知识档案匹配，可进一步学习相关知识Python入门技能树 络爬虫urllib211392 人正在系统学习中