《Python学习课件---062论一只爬虫的自我修养10:安装Scrapy》由会员分享,可在线阅读,更多相关《Python学习课件---062论一只爬虫的自我修养10:安装Scrapy(10页珍藏版)》请在金锄头文库上搜索。
1、零基础入门学习Python,作者:小甲鱼 让编程改变世界 Change the world by program,Scrapy,说到Python爬虫,大牛们都会不约而同地提起Scrapy。因为Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。可以应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中。 Scrapy最初是为了页面抓取(更确切来说, 网络抓取)所设计的,也可以应用在获取API所返回的数据(例如Amazon Associates Web Services)或者通用的网络爬虫。,Step 1,安装Python2.7(32位版本) https:/www.pytho
2、n.org/downloads/release/python-279/,Setp 2,打开“运行”,输入cmd。执行以下命令,设置环境变量: C:Python27python.exe C:Python27toolsScriptswin_add2path.py,Setp 3,重新打开cmd,输入命令“python version” 如果有显示Python2.7.9则说明成功; 如果没有,请服用Windows特效药:重启系统尝试一下。,Step 4,安装pywin32(32位版本) ,Step 5,安装pip,地址: https:/pip.pypa.io/en/latest/installing.
3、html 下载get-pip.py 进入cmd,执行:python get-pip.py 检查Python27Scripts中是否有pip.exe并设置Python27Scripts到环境变量中 重启cmd,输入命令“pip -version” 如果有显示版本号则说明成功; 如果没有,请继续服用Windows特效药:重启系统尝试一下。,Stop 6,安装lxml http:/lxml.de/installation.html,Stop 7,安装OpenSSL https:/pypi.python.org/pypi/pyOpenSSL pip install pyOpenSSL,Step 8,安装Scrapy pip install Scrapy,