win10系統(tǒng)中安裝scrapy-1.1
0.環(huán)境說明
win10 64bit,電腦也是64bit的處理器,電腦裝有vs2010 64bit,但是為了保險(xiǎn)起見,只試驗(yàn)了32位的安裝,等有時(shí)間了,再試下64位的安裝。如無特殊說明,一切操作都是在windows命令行下執(zhí)行的。電腦也需要聯(lián)網(wǎng),因?yàn)閜ip在安裝包的時(shí)候,需要在線下載相關(guān)包。
1.安裝python
我用的是win32-python-2.7.12,請(qǐng)切記用版本高于.10以上版本,因?yàn)槲矣浀玫窖bpip的時(shí)候,好像必須要.8以上版本。
然后是將相關(guān)環(huán)境變量配置到path路徑中,不懂請(qǐng)谷歌,結(jié)果如下圖黃色說明。
2.安裝pip
點(diǎn)擊https://pypi.python.org/pypi/pip 下載pip-6.1.1.tar.gz (md5, pgp)
解壓后進(jìn)行文件夾,執(zhí)行:python setup.py install
3.安裝lxml
lxml是一種使用 Python 編寫的庫,可以迅速、靈活地處理 XML。選擇對(duì)應(yīng)的Python版本安裝。;
安裝命令:pip install lxml
驗(yàn)證是否安裝成功見下圖:
4.安裝zope.interface
pip install zope.interface
5.安裝Twisted
Twisted是用Python實(shí)現(xiàn)的基于事件驅(qū)動(dòng)的網(wǎng)絡(luò)引擎框架,安裝命令:
pip install twisted
我轉(zhuǎn)的時(shí)候,遇到了問題:
error: Microsoft Visual C++ 9.0 is required (Unable to find vcvarsall.bat). Get it from http://aka.ms/vcpython27
解決辦法如下:
Execute the following command based on the version of Visual Studio installed:
Visual Studio 2010 (VS10):SET VS90COMNTOOLS=%VS100COMNTOOLS%
Visual Studio 2012 (VS11):SET VS90COMNTOOLS=%VS110COMNTOOLS%
Visual Studio 2013 (VS12):SET VS90COMNTOOLS=%VS120COMNTOOLS%
Visual Studio 2015 (VS14):SET VS90COMNTOOLS=%VS140COMNTOOLS%
然后再重新執(zhí)行:
pip install twisted
即可。
6.安裝pyOpenSSL
pip install pyopenssl
7.安裝win32py
提供win32api,點(diǎn)擊 http://sourceforge.net/projects/pywin32/files/pywin32/下載
pywin32-220.win32-py2.1.exe,點(diǎn)擊安裝即可。
8.安裝scrapy
pip install scrapy
9.測試scrapy是否可用:
安裝完成,開始使用吧!
哈哈……
- Python爬蟲框架Scrapy安裝使用步驟
- 解決Scrapy安裝錯(cuò)誤:Microsoft Visual C++ 14.0 is required...
- 在Linux系統(tǒng)上安裝Python的Scrapy框架的教程
- windows10系統(tǒng)中安裝python3.x+scrapy教程
- 零基礎(chǔ)寫python爬蟲之爬蟲框架Scrapy安裝配置
- Python3安裝Scrapy的方法步驟
- CentOS7下安裝Scrapy步驟詳細(xì)介紹
- Mac中Python 3環(huán)境下安裝scrapy的方法教程
- python中安裝Scrapy模塊依賴包匯總
- win7+Python3.5下scrapy的安裝方法
相關(guān)文章
詳解基于Facecognition+Opencv快速搭建人臉識(shí)別及跟蹤應(yīng)用
這篇文章主要介紹了詳解基于Facecognition+Opencv快速搭建人臉識(shí)別及跟蹤應(yīng)用,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2021-01-01使用pandas對(duì)兩個(gè)dataframe進(jìn)行join的實(shí)例
今天小編就為大家分享一篇使用pandas對(duì)兩個(gè)dataframe進(jìn)行join的實(shí)例,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來看看吧2018-06-06Python計(jì)算三角函數(shù)之a(chǎn)sin()方法的使用
這篇文章主要介紹了Python計(jì)算三角函數(shù)之a(chǎn)sin()方法的使用,是Python入門的基礎(chǔ)知識(shí),需要的朋友可以參考下2015-05-05python神經(jīng)網(wǎng)絡(luò)使用Keras進(jìn)行模型的保存與讀取
這篇文章主要為大家介紹了python神經(jīng)網(wǎng)絡(luò)使用Keras進(jìn)行模型的保存與讀取,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2022-05-05Python列表原理與用法詳解【創(chuàng)建、元素增加、刪除、訪問、計(jì)數(shù)、切片、遍歷等】
這篇文章主要介紹了Python列表原理與用法,結(jié)合實(shí)例形式詳細(xì)分析了Python列表的創(chuàng)建、元素增加、刪除、訪問、計(jì)數(shù)、切片、遍歷、排序等各種常見操作技巧與使用注意事項(xiàng),需要的朋友可以參考下2019-10-10Python實(shí)現(xiàn)圖片格式轉(zhuǎn)換小程序
這篇文章主要為大家詳細(xì)介紹了Python實(shí)現(xiàn)圖片格式轉(zhuǎn)換小程序,文中示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2022-08-08Python網(wǎng)絡(luò)編程之ftplib模塊
這篇文章介紹了Python網(wǎng)絡(luò)編程之ftplib模塊,文中通過示例代碼介紹的非常詳細(xì)。對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2022-05-05