Windows系統(tǒng)下Pycharm運(yùn)行Scrapy爬蟲(chóng)項(xiàng)目如何操作

Windows系統(tǒng)下Pycharm運(yùn)行Scrapy爬蟲(chóng)項(xiàng)目如何操作？目標(biāo)在Win7上建立一個(gè)Scrapy爬蟲(chóng)項(xiàng)目，以及對(duì)其進(jìn)行基本操作。運(yùn)行環(huán)境電腦上已經(jīng)安裝了python（環(huán)境變量path已經(jīng)設(shè)置好），以及scrapy模塊，IDE為Pycharm。操作如下：一、建立5crapy模板口進(jìn)入自己的工作目錄rshift十鼠標(biāo)右鍵進(jìn)入命令行模式f在命令行模式下,輸入scrapy&tartproject項(xiàng)目名（如下：E：xj9C.h-armFjhoArturoQectrest-Denoem piroject1TestDeno*,usingtenplatedirEctoFiiJc：\Misbfe\\?dnlni￡tratoWftppdata\^localXSprogramsWp^tlion^pythnnSt-3左、、Waite-packd.gcsSSscrapyWtenplntcsS\projcct1',crefttodin；F；Hyt:hcrnPrajects^TestDcnoYouCAn零七mi\七younfirstspidei1with：cdTestDenoscrapy^ensplder'exam-pl? -conF：xjycbflrnFi'ojects>看到以上的代碼說(shuō)明項(xiàng)§已經(jīng)在工作目錄中建好了二、在Pych日rm中“rmpy的導(dǎo)入。在Pycharm中打開(kāi)工作目錄中的Te，tDem。，點(diǎn)擊File->Settings^Project:TestDemo->ProjectInterpreter.5去一：如圖FJ■田■仙與11a0， Fraje-ctT9THTvmc卜Pr-i>|Kt■nE*r|irrt?r?一口一, -KmI "Rkdkw# 0ft LWWK -j=■51Seghk 5^, 田 總￡11Q^" ^ .racA： OlIU dLlJLJtcofef 后田 看10 LtQLfi l.?? ■ 聞F 和65 3的(h>d qmPrtPWrfHi P 74* UKe 5fipf 3中忖沁福 U9總 1加“呻"( 加5" fr!4l OMrl? VmwiCanrfffii mjiFeMu M*口 aLU, TgMwhw ee 1一 “MdiiMrEk 彳4口FEE.… -山山 J.LJ 工山m 田域 2WJJJJ —aiAXXB?iSJrild. lUKUUOfliDl|M^MfH 的 lill* mtinStK 中l(wèi)71 f.Twlr ftii 0.23cai*ARd)r 1XU i工L。3.M NA出? UU LMe￡d<em-AW 4J」 -4-?^lirawfiO?s 023 ati山iMn LAI LOd1TML 17Hl4? IM C^anrflt選擇紅框中右邊的下拉菜單點(diǎn)擊ShowAll,如圖

點(diǎn)擊右上角加號(hào)，如圖國(guó)AddLdcaEPydkoc加蝌?]3$1「VlrtlialpriirEbEE-il.J'CondiE^wlro^mewtt:\PyrharmPFO[eelE\TbnBOema^emv，Systi?iTiIrtirrpr^iHa騏ifiitc-rpne^cn'》PjthsnEdctilwiinKW-tv\Adffiin點(diǎn)擊右上角加號(hào)，如圖國(guó)AddLdcaEPydkoc加蝌?]3$1「VlrtlialpriirEbEE-il.J'CondiE^wlro^mewtt:\PyrharmPFO[eelE\TbnBOema^emv，Systi?iTiIrtirrpr^i'trheritglcLulsiiL芒?p=以上gsiLiiL^'binnEEircmmiH-n4SnEerp"r^te-'<NigInterpreter>在紅色框體內(nèi)找到電腦里已經(jīng)安裝的python，比如我的是：C:\Llsers\Administrator\AppData\Locdl\Pragrdms\Python\Python36-32\python.exeP導(dǎo)入即可。之后『pych日「m會(huì)自動(dòng)導(dǎo)入你已經(jīng)在電腦上安裝的scmpy等模塊.如圖，即紅色框體中顯示的.

,.蟲(chóng)” 二窗—T-MrUlMefke3Fnj?ei:EfiurprMh ?=；..L=jr”rpi）：wd*MJfMirancflUchiByiDff 毗*-lymJK****網(wǎng)—9ramM.JWrffWTMehuitiiAidlTq^-^bTw 口）函由干 用ri由ST* l.E+>Mt?―yi L 如 麗西wngn 204 JjfclhlFC?tai? :H?fL aiu au.3餐"” it 斤以， ￡14 5.1-0M1kliI M?，kp&J i_t 1力今有產(chǎn)用派曰 之d$ M.5(V^0L 皿 加K41P P^r^H. 7J.S JJ品>“a 3十 1Adi a-5Jt. IukW UM irsiDM*9HH 網(wǎng)kt』 “皿 A441* ? WyUrffm 口Et尸中tttTEXEfli 上修 173..一■Kf … 才.umqjETlmjEj* ME MLTJLLl *201A111>MiM.moaii^mmpItrEnt * nm- _ ￡hlriW 3UL* 皿1整UBflfkii^bi.4Flaffirm而OKE Ehi<r fl%r,TZf ce4oriHui d工巾 O.MCoMMTlfc HILO 13kLO1e*Tpt=>gr?fJ^r 3uu4 OuEK—t I.U 1W融中聞日 ClJ -1-J.1tX2」knuii-b 1QJ iaikJnnrE^k 17J.L 1ZJ11?rK 2*川|嗎1法二;『一個(gè)不那也麻煩的方法上如圖

■,國(guó)FifijectiTfflfeD??irnjectinlcrptt<￡it:iGiifidiiffpl-i^aE：1ApfHiratfic*kBaliavIct『『3口￡T1e?rpm- 5 Itidpuhd*i 1LJMIfAdF"-：■:門Lh->\^rp .7hErfiKKiflf.wnLYSTniafi'^Ymififwkfe-Jj■內(nèi)mpTrooLDJh^Kfracflu-f*Vwk)^Jl?S^adwrra1dBELai^j?.FU.dkM-05J4&JJL5梟也LatLiScopesNelSc3tHiQtxkL)nsKwynnaff-?EdGlJkFRirginiWVit^vriCfrnlr#l“ TotOe^MKjpETf戶申pehw均MySQL^r.四TwfH-dWillCryP4D高回(導(dǎo)MOW￥q*□AJOJJJEi2。1KtM?OJXJi17JjBZtDw^M9ikM■IMi39如WlAfU力挑。17JJe1JJ血qihjMuE(?-dF?l?dL3.,ML山，fButjd?EiEtutianDcpl/nwnt?由(Wd?Hd4L■wlartfTM1?afpKI^JiAph|fiaasslcf"11.1^34M3QJf15,91MJmMi.&T蟲(chóng)WIM.0不￡鼻1W4LL??21'Bf^trj^cMnnMmiMbUJ1RJ11J.10i2J.1AI17=5_11?qn 口k/點(diǎn)擊紅色框體，在彈出的框體內(nèi)另安裝一個(gè)scrapy,如圖:ijJ^"'_"'sJD-CCTp-raPnG1 「例aoas弼閨AUH6ClcRar^arI3tadMUnI喇&Ari^@nbrr|5mOr值］(kfe11Mrnr^fT牘X”gpjinI俱?cWf?uMillJifjjyKiLiW371§ "*jAh?HIiTMBftlPSSpec*wi'-SiiCirSinndlifuilitriSSpec*wi'-SiiCirtowier!s4除 di^^047曠_^13ralAdftihiXiaGiV即口而M，n**用bb他diim需要安裝的python模塊，如圖:模塊自下而上進(jìn)行安裝，其中可能出現(xiàn)tv^ted包不能成功安裝『出現(xiàn)FailedbuildmgwheelforTwistedMicrosoftVisualC++14.0Krequired...的現(xiàn)象|那就搜一解決方案.這里不多說(shuō)了。三、Pycharm中scrapy的運(yùn)行設(shè)置。法一：■dpy爬蟲(chóng)的運(yùn)行需要到命令行下運(yùn)行，在pychram中左下角有個(gè)Te「minaL點(diǎn)開(kāi)就可;任P”hdrm下進(jìn)入命令行,默認(rèn)是在項(xiàng)目目錄下的r要運(yùn)行項(xiàng)目?需要進(jìn)入下一層目錄j使用ETe^tDemo進(jìn)入下一層目錄『然后用scrapyc「awl爬蟲(chóng)名r即可運(yùn)行爬蟲(chóng)1s如圖：方一篇:明cln^3le;tdctiDdpi4不￡?*det{￡trqjy_5口idcjJ：冷」確一w*EkTcirtDemo .方一篇:明cln^3le;tdctiDdpi4不￡?*det{￡trqjy_5口idcjJ：冷」確一w*EkTcirtDemo .inijor".SCTiipYrai^idtni以n-nsu::,middtewrg.pjr存NT市強(qiáng)制語(yǔ)立擊購(gòu)工皿?M?TS*電mq時(shí)dg十日M5frnfllLiDehen-orwr- .■目，田：口11日丹川_乩京口：CMstari_urls-taj&.1Lhttn://bniAlfom/P[I-1parse:一responseJ;

jsjjn!(risp-srisi-,fjfi)<veiKp■F：;FyckuunpTojects'IaistbeiolestJjfii?^scrapycjt?5tDe-ccSpider-2018-&I-2917:09:19I'ycraiDy,utiH.l^elIUFO;專wjjpyl.！kDistart"(hotJTestliecr^;2(H3HH一第17：0S：LiCscrapf.utils,loE]INFO：l^rwic■砥二limlt.kl.9,”“血？二丈氏eswI2e1,0,3.6.Edl^reb,DecL9如】：.06:01145)M戈w.ISQ^bit(XntcUl.pyOp?nSSL1，5.電fQpu油乳hL。品2F>QCK> ■ 1筆TffZ

FenrinMX. [「I 」 ，(venv)F:\PychaxniProjects\Te：stDema*cdTest^Demofvcnv)F：\PycharrnProjectsXTe^tDemo\TestDemo?scrarpycrawltestDemoSpider運(yùn)行或功201S-01-2911:51:29(scrapy.utilsiLoe]INFO:ScrapyL5」Qstartedtbot:TestDcuici?法二！在丁舊奴口日troBpidE「目錄和網(wǎng)「叩同級(jí)目錄下面:新建一次■田1tWPMh匕P￥文件，如圖0TrrtDcmQ[F￡\PyGKirmlJrQjctLMTe"Wi&efnQ,-^Tc3iDs?*?\ffntrypdntpfFFf*lDciT^j-Py{kimfittdk阱c.H*i皿嗨中￡<m!c觸口”t?JiVtJMndffwHdp?T宙gm?DIrtOfmo后亡世中網(wǎng)瓶梅*4團(tuán)抑哨ed ??■TcstDoimo,u-r-i'TBlTesiB*4團(tuán)抑哨ed ??■TcstDoimo,u-r-i'TBlTesiBaflTQ*blspsdenEi而pfflfy&pE曲⑶i0限印◎由再rw5而、m*—H*￥d*?*師上收kIfJjnfdian? EicterrniLibrarid?+1?-rrc^EtL\lt?￡fiEinfi4TEsr/bi加sirp-jihon生土迺f二&-±-S岫3bcr;可時(shí)(f&?ilr；；iviiw：201S/M/DA!]*Twon-r：P>-Clionicny31in*.e-ierrjle1[ ,::frc-ciiscriapyimportcndJinc111TH印enh^ptiiM&t F;'PycharnFrojrc■jgnrnihg.\vcw\Scriptay?k.wirsc-f;/PychsniFTCjcct5/7-f5；[JcHrt/7f5；Dnic/m；ry>oim.4 20I8-CH2?I'!32:^3[?r^uuU.ladINFO:EhrfLIUstared.bflt:iMlPrtie--目M1S--01-M1:T:簿Mt/mlk及