91精品国产自产在线老师啪l,高清无码a黄毛片免费在线观看,精品人妻在线精品视频

《Python網(wǎng)絡(luò)爬蟲項(xiàng)目開發(fā)全程實(shí)錄》精選 11個(gè)熱門的網(wǎng)絡(luò)爬蟲項(xiàng)目，突出了實(shí)用性。具體項(xiàng)目包含：智能破解驗(yàn)證碼、手機(jī)數(shù)據(jù)爬取精靈、汽車之家圖片抓取工具、高清壁紙快車(多線程版)、多進(jìn)程影視獵手、分布式爬取動(dòng)態(tài)新聞數(shù)據(jù)、世界 500 強(qiáng)數(shù)據(jù)爬取與分析、二手房信息智能抓取分析系統(tǒng)、圖書熱銷偵探、APP 數(shù)據(jù)采集先鋒、微信智能機(jī)器人。本書從軟件工程的角度出發(fā)，按照項(xiàng)目開發(fā)的順序，系統(tǒng)、全面地講解每一個(gè)項(xiàng)目的開發(fā)實(shí)現(xiàn)過程。體例上，每章一個(gè)項(xiàng)目，統(tǒng)一采用開發(fā)背景一系統(tǒng)設(shè)計(jì)一技術(shù)準(zhǔn)備一各功能模塊的設(shè)計(jì)與實(shí)現(xiàn)一項(xiàng)目運(yùn)行一源碼下載的形式完整呈現(xiàn)項(xiàng)目，讓讀者快速積累實(shí)際項(xiàng)目經(jīng)驗(yàn)與技巧，早日實(shí)現(xiàn)就業(yè)目標(biāo)。

叢書說明：軟件項(xiàng)目開發(fā)全程實(shí)錄叢書第1 版于2008 年6 月出版，因其定位于項(xiàng)目開發(fā)案例、面向?qū)嶋H開發(fā)應(yīng)用，并解決了社會(huì)需求和高校課程設(shè)置相對(duì)脫節(jié)的痛點(diǎn)，在軟件項(xiàng)目開發(fā)類圖書市場(chǎng)上產(chǎn)生了很大的反響，在全國(guó)軟件項(xiàng)目開發(fā)零售圖書排行榜中名列前茅。
軟件項(xiàng)目開發(fā)全程實(shí)錄叢書第2 版于2011 年1 月出版，第3 版于2013 年10 月出版，第4 版于2018年5 月出版。本套叢書經(jīng)過十六年的錘煉打造，不僅深受廣大程序員的喜愛，還被百余所高校選為計(jì)算機(jī)科學(xué)、軟件工程等相關(guān)專業(yè)的教材及教學(xué)參考用書，更被廣大高校學(xué)子用作畢業(yè)設(shè)計(jì)和工作實(shí)習(xí)的參考用書。
軟件項(xiàng)目開發(fā)全程實(shí)錄叢書第5 版在繼承前4 版所有優(yōu)點(diǎn)的基礎(chǔ)上，進(jìn)行了大幅度的改版升級(jí)。首先，結(jié)合當(dāng)前技術(shù)發(fā)展的最新趨勢(shì)與市場(chǎng)需求，增加了程序員求職急需的新圖書品種；其次，對(duì)圖書內(nèi)容進(jìn)行了深度更新、優(yōu)化，新增了當(dāng)前熱門的流行項(xiàng)目，優(yōu)化了原有經(jīng)典項(xiàng)目，將開發(fā)環(huán)境和工具更新為目前的新版本等，使之更與時(shí)代接軌，更適合讀者學(xué)習(xí)；第三，錄制了全新的項(xiàng)目精講視頻，并配備了更加豐富的學(xué)習(xí)資源與服務(wù)，可以給讀者帶來更好的項(xiàng)目學(xué)習(xí)及使用體驗(yàn)。
Python 是一種非常流行且強(qiáng)大的編程語言，它不僅因?yàn)楹?jiǎn)潔的語法受到開發(fā)者的喜愛，還因?yàn)閾碛胸S富的庫來支持各種高級(jí)功能。其中，網(wǎng)絡(luò)爬蟲方向是Python 開發(fā)中一個(gè)極為重要的應(yīng)用領(lǐng)域。網(wǎng)絡(luò)爬蟲是一種自動(dòng)化的程序，用于從互聯(lián)網(wǎng)上抓取數(shù)據(jù)，這些數(shù)據(jù)可以是網(wǎng)頁上的文本、圖片、鏈接等信息，也可以是更復(fù)雜的數(shù)據(jù)結(jié)構(gòu)，如JSON 或XML 格式的數(shù)據(jù)等。通過使用Python 編寫網(wǎng)絡(luò)爬蟲程序，開發(fā)者能夠高效地收集大量數(shù)據(jù)，這些數(shù)據(jù)對(duì)于市場(chǎng)分析、產(chǎn)品開發(fā)、競(jìng)品分析等領(lǐng)域都具有極高的價(jià)值。
本書內(nèi)容
本書以中小型項(xiàng)目為載體，精選11 個(gè)熱門的網(wǎng)絡(luò)爬蟲項(xiàng)目，包括智能破解驗(yàn)證碼、手機(jī)數(shù)據(jù)爬取精靈、汽車之家圖片抓取工具、高清壁紙快車（多線程版）、多進(jìn)程影視獵手、分布式爬取動(dòng)態(tài)新聞數(shù)據(jù)、世界500強(qiáng)數(shù)據(jù)爬取與分析、二手房信息智能抓取分析系統(tǒng)、圖書熱銷偵探、APP 數(shù)據(jù)采集先鋒、微信智能機(jī)器人。通過這些熱門、實(shí)用的項(xiàng)目，本書帶領(lǐng)讀者切身感受Python 網(wǎng)絡(luò)爬蟲項(xiàng)目開發(fā)的實(shí)際過程，讓讀者深刻體會(huì)Python 網(wǎng)絡(luò)爬蟲技術(shù)在項(xiàng)目開發(fā)中的具體應(yīng)用。全書內(nèi)容不是枯燥的語法和陌生的術(shù)語，而是一步一步地引導(dǎo)讀者實(shí)現(xiàn)一個(gè)個(gè)熱門的項(xiàng)目，從而激發(fā)讀者學(xué)習(xí)項(xiàng)目開發(fā)的興趣，變被動(dòng)學(xué)習(xí)為主動(dòng)學(xué)習(xí)。
本書特點(diǎn)
項(xiàng)目典型。本書精選11 個(gè)熱點(diǎn)項(xiàng)目，涉及多個(gè)Python 爬蟲模塊及多領(lǐng)域應(yīng)用。所有項(xiàng)目均從實(shí)際應(yīng)用角度出發(fā)，可以讓讀者從項(xiàng)目學(xué)習(xí)中積累豐富的開發(fā)經(jīng)驗(yàn)。
流程清晰。本書項(xiàng)目從軟件工程的角度出發(fā)，統(tǒng)一采用開發(fā)背景系統(tǒng)設(shè)計(jì)技術(shù)準(zhǔn)備各功能模塊的設(shè)計(jì)與實(shí)現(xiàn)項(xiàng)目運(yùn)行源碼下載的流程進(jìn)行講解，可以讓讀者更加清晰地了解項(xiàng)目的完整開發(fā)流程。
技術(shù)新穎。本書所有項(xiàng)目的實(shí)現(xiàn)技術(shù)均采用目前業(yè)內(nèi)推薦使用的最新穩(wěn)定版本，與時(shí)俱進(jìn)，實(shí)用性極強(qiáng)。同時(shí)，所有項(xiàng)目均配備技術(shù)準(zhǔn)備環(huán)節(jié)，對(duì)項(xiàng)目中用到的Python 網(wǎng)絡(luò)爬蟲基本技術(shù)點(diǎn)、高級(jí)應(yīng)用、第三方模塊等進(jìn)行精要講解，為初級(jí)編程人員參與項(xiàng)目開發(fā)掃清了障礙。
欄目精彩。本書根據(jù)項(xiàng)目學(xué)習(xí)的需要，在每個(gè)項(xiàng)目講解過程的關(guān)鍵環(huán)節(jié)增設(shè)了注意說明等特色欄目，點(diǎn)撥項(xiàng)目的開發(fā)要點(diǎn)和精華，幫助讀者更快地掌握相關(guān)技術(shù)的應(yīng)用技巧。
源碼下載。本書中的每個(gè)項(xiàng)目最后都安排了源碼下載一節(jié)，讀者能夠通過掃描二維碼下載對(duì)應(yīng)項(xiàng)目的完整源碼，以方便學(xué)習(xí)。
項(xiàng)目視頻。本書為每個(gè)項(xiàng)目提供了精講微視頻，使讀者能夠更加輕松地搭建、運(yùn)行、使用項(xiàng)目，并能夠隨時(shí)隨地查看和學(xué)習(xí)。
讀者對(duì)象：初學(xué)Python 網(wǎng)絡(luò)爬蟲的自學(xué)者；高等院校的教師；參與項(xiàng)目實(shí)訓(xùn)的學(xué)生；IT 培訓(xùn)機(jī)構(gòu)的教師與學(xué)員；做畢業(yè)設(shè)計(jì)的學(xué)生；爬蟲及數(shù)據(jù)分析開發(fā)者；參加實(shí)習(xí)的初級(jí)程序員；編程愛好者。
資源與服務(wù)
本書提供了大量的輔助學(xué)習(xí)資源，還提供了專業(yè)的知識(shí)拓展與答疑服務(wù)，旨在幫助讀者提高學(xué)習(xí)效率并解決學(xué)習(xí)過程中遇到的各種疑難問題。讀者需要刮開圖書封底的防盜碼（刮刮卡），掃描并綁定微信，獲取學(xué)習(xí)權(quán)限。
（1）開發(fā)環(huán)境搭建視頻
搭建環(huán)境對(duì)于項(xiàng)目開發(fā)非常重要，它確保了項(xiàng)目開發(fā)在一致的環(huán)境下進(jìn)行，減少了因環(huán)境差異導(dǎo)致的錯(cuò)誤和沖突。通過搭建開發(fā)環(huán)境，項(xiàng)目依賴得以方便管理，從而提高開發(fā)效率。本書提供了開發(fā)環(huán)境搭建的講解視頻，可以引導(dǎo)讀者快速準(zhǔn)確地搭建本書項(xiàng)目的開發(fā)環(huán)境。
（2）項(xiàng)目精講視頻
本書每個(gè)項(xiàng)目均配有對(duì)應(yīng)的項(xiàng)目精講微視頻，主要針對(duì)項(xiàng)目的需求背景、應(yīng)用價(jià)值、功能結(jié)構(gòu)、業(yè)務(wù)流程、實(shí)現(xiàn)邏輯以及所用到的核心技術(shù)點(diǎn)進(jìn)行精要講解，可以幫助讀者了解項(xiàng)目概要，把握項(xiàng)目要領(lǐng)，快速進(jìn)入學(xué)習(xí)狀態(tài)。掃描每章首頁的對(duì)應(yīng)二維碼即可觀看學(xué)習(xí)。
（3）項(xiàng)目源碼
本書每章一個(gè)項(xiàng)目，系統(tǒng)全面地講解了該項(xiàng)目的設(shè)計(jì)及實(shí)現(xiàn)過程。為了方便讀者學(xué)習(xí)，本書提供了完整的項(xiàng)目源碼（包含項(xiàng)目中用到的所有素材，如圖片、數(shù)據(jù)表等）。掃描每章最后的二維碼即可下載這些源碼。
（4）AI 輔助開發(fā)手冊(cè)
在人工智能浪潮的席卷之下，AI 大模型工具呈現(xiàn)百花齊放之態(tài)，輔助編程開發(fā)的代碼助手類工具不斷涌現(xiàn)，可為開發(fā)人員提供技術(shù)點(diǎn)問答、代碼查錯(cuò)、輔助開發(fā)等非常實(shí)用的服務(wù)，極大地提高了編程學(xué)習(xí)和開發(fā)效率。為了幫助讀者快速熟悉并使用這些工具，本書專門精心配備了電子版的《AI 輔助開發(fā)手冊(cè)》，不僅為讀者提供各個(gè)主流大語言模型的使用指南，而且詳細(xì)講解文心快碼（Baidu Comate）、通義靈碼、騰訊云AI 代碼助手、iFlyCode 等專業(yè)的智能代碼助手的使用方法。
（5）代碼查錯(cuò)器
為了進(jìn)一步幫助讀者提升學(xué)習(xí)效率，培養(yǎng)良好的編碼習(xí)慣，本書配備了由明日科技自主開發(fā)的代碼查錯(cuò)器。讀者可以將本書的項(xiàng)目源碼保存為對(duì)應(yīng)的 .txt 文件，存放到代碼查錯(cuò)器的對(duì)應(yīng)文件夾中，然后自己編寫相應(yīng)的實(shí)現(xiàn)代碼并與項(xiàng)目源碼進(jìn)行比對(duì)，快速找出自己編寫的代碼與源碼不一致或者發(fā)生錯(cuò)誤的地方。代碼查錯(cuò)器配有詳細(xì)的使用說明文檔，掃描二維碼即可下載。
（6）Python 開發(fā)資源庫
本書配備了強(qiáng)大的線上Python 開發(fā)資源庫，包括技術(shù)資源庫、技巧資源庫、實(shí)例資源庫、項(xiàng)目資源庫、源碼資源庫、視頻資源庫。掃描二維碼，可登錄明日科技網(wǎng)站，獲取Python 開發(fā)資源庫一年的免費(fèi)使用權(quán)限。
（7）Python 面試資源庫
本書配備了Python 面試資源庫，精心匯編了大量企業(yè)面試真題，是求職面試的絕佳指南。掃描本書封底的文泉云盤二維碼即可獲取。
（8）教學(xué)PPT
本書配備了精美的教學(xué)PPT，可供高校教師和培訓(xùn)機(jī)構(gòu)講師備課使用，也可供讀者做知識(shí)梳理。掃描本書封底的文泉云盤二維碼即可下載。另外，登錄清華大學(xué)出版社網(wǎng)站，可在本書對(duì)應(yīng)頁面查閱教學(xué)PPT 的獲取方式。
（9）學(xué)習(xí)答疑
在學(xué)習(xí)過程中，讀者難免會(huì)遇到各種疑難問題。本書配有完善的新媒體學(xué)習(xí)矩陣，包括IT 今日熱榜（實(shí)時(shí)提供最新技術(shù)熱點(diǎn)）、微信公眾號(hào)、學(xué)習(xí)交流群、400 電話等，可為讀者提供專業(yè)的知識(shí)拓展與答疑服務(wù)。掃描右側(cè)二維碼，根據(jù)提示操作，即可享受答疑服務(wù)。
致讀者
本書由明日科技Python 開發(fā)團(tuán)隊(duì)組織編寫。明日科技是一家專業(yè)從事軟件開發(fā)、教育培訓(xùn)以及軟件開發(fā)教育資源整合的高科技公司，其編寫的圖書非常注重選取軟件開發(fā)中的必需、常用內(nèi)容，同時(shí)也很注重內(nèi)容的易學(xué)性、學(xué)習(xí)的方便性以及相關(guān)知識(shí)的拓展性，深受讀者喜愛。其編寫的圖書多次榮獲全行業(yè)優(yōu)秀暢銷品種全國(guó)高校出版社優(yōu)秀暢銷書等獎(jiǎng)項(xiàng)，多個(gè)品種長(zhǎng)期位居同類圖書銷售排行榜的前列。
在編寫本書的過程中，我們始終本著科學(xué)、嚴(yán)謹(jǐn)?shù)膽B(tài)度，力求精益求精，但書中疏漏之處在所難免，敬請(qǐng)廣大讀者批評(píng)指正。
感謝您選擇本書，希望本書能成為您的良師益友，成為您步入編程高手之路的踏腳石。寶劍鋒從磨礪出，梅花香自苦寒來。祝讀書快樂！

第 1 章智能破解驗(yàn)證碼 1
re 正則表達(dá)式 requests BeautifulSoup(bs4) Pillow tesserocr selenium
1.1 開發(fā)背景 1
1.2 系統(tǒng)設(shè)計(jì) 2
1.2.1 開發(fā)環(huán)境 2
1.2.2 業(yè)務(wù)流程 2
1.2.3 功能結(jié)構(gòu) 3
1.3 技術(shù)準(zhǔn)備 3
1.3.1 技術(shù)概覽 3
1.3.2 Pillow 模塊的使用 4
1.3.3 tesserocr 模塊的使用 4
1.3.4 Selenium 自動(dòng)化測(cè)試工具的使用 6
1.4 功能設(shè)計(jì) 7
1.4.1 破解字符驗(yàn)證碼 7
1.4.2 破解滑動(dòng)拼圖驗(yàn)證碼 9
1.4.3 第三方平臺(tái)識(shí)別驗(yàn)證碼 11
1.5 項(xiàng)目運(yùn)行 15
1.6 源碼下載 16
第 2 章手機(jī)數(shù)據(jù)爬取精靈 17
random time PyMySQL requests_html
2.1 開發(fā)背景 17
2.2 系統(tǒng)設(shè)計(jì) 18
2.2.1 開發(fā)環(huán)境 18
2.2.2 業(yè)務(wù)流程 18
2.2.3 功能結(jié)構(gòu) 18
2.3 技術(shù)準(zhǔn)備 19
2.3.1 技術(shù)概覽 19
2.3.2 random 模塊的使用 20
2.3.3 time 模塊的使用 21
2.3.4 requests_html 模塊的使用 22
2.4 數(shù)據(jù)庫設(shè)計(jì) 23
2.5 功能設(shè)計(jì) 24
2.5.1 分析手機(jī)數(shù)據(jù)網(wǎng)頁中的分頁規(guī)律 24
2.5.2 分析手機(jī)詳情頁地址 25
2.5.3 確認(rèn)手機(jī)詳情頁中的各項(xiàng)信息對(duì)應(yīng)的位置 26
2.5.4 導(dǎo)入模塊 26
2.5.5 定義公共變量 26
2.5.6 實(shí)現(xiàn)爬取數(shù)據(jù)并插入數(shù)據(jù)庫功能 27
2.5.7 實(shí)現(xiàn)下載手機(jī)圖片功能 29
2.5.8 定義程序入口 29
2.6 項(xiàng)目運(yùn)行 29
2.7 源碼下載 32
第 3 章汽車之家圖片爬取工具 33
文件讀寫文件夾操作 urllib BeautifulSoup(bs4) PyQt5 Pillow
3.1 開發(fā)背景 33
3.2 系統(tǒng)設(shè)計(jì) 34
3.2.1 開發(fā)環(huán)境 34
3.2.2 業(yè)務(wù)流程 34
3.2.3 功能結(jié)構(gòu) 34
3.3 技術(shù)準(zhǔn)備 35
3.3.1 技術(shù)概覽 35
3.3.2 使用 PyQt5 設(shè)計(jì) Python 窗體程序 36
3.4 設(shè)計(jì)主窗體 41
3.5 功能設(shè)計(jì) 44
3.5.1 模塊導(dǎo)入 44
3.5.2 通過爬蟲爬取并保存圖片 44
3.5.3 在主窗體中調(diào)用爬蟲方法 47
3.5.4 分類查看爬取的汽車圖片 48
3.5.5 單擊查看大圖 50
3.6 項(xiàng)目運(yùn)行 51
3.7 源碼下載 52
第 4 章高清壁紙快車（多線程版） 53
文件讀寫 requests BeautifulSoup4(bs4) PyQt5 concurrent.futur
4.1 開發(fā)背景 53
4.2 系統(tǒng)設(shè)計(jì) 54
4.2.1 開發(fā)環(huán)境 54
4.2.2 業(yè)務(wù)流程 54
4.2.3 功能結(jié)構(gòu) 54
4.3 技術(shù)準(zhǔn)備 55
4.3.1 技術(shù)概覽 55
4.3.2 concurrent.futures 模塊的使用 56
4.4 設(shè)計(jì)主窗體 58
4.5 功能設(shè)計(jì) 60
4.5.1 模塊導(dǎo)入 60
4.5.2 多線程爬取并保存高清壁紙 60
4.5.3 在 PyQt5 窗體中調(diào)用爬蟲方法 64
4.5.4 使用列表顯示爬取的所有高清壁紙名稱 65
4.5.5 在 PyQt5 窗體中查看爬取的高清壁紙 66
4.6 項(xiàng)目運(yùn)行 67
4.7 源碼下載 68
第 5 章多進(jìn)程影視獵手 69
requests BeautifulSoup(bs4) re 正則表達(dá)式 fake_useragent multiprocessing PyMySQ
5.1 開發(fā)背景 69
5.2 系統(tǒng)設(shè)計(jì) 70
5.2.1 開發(fā)環(huán)境 70
5.2.2 業(yè)務(wù)流程 70
5.2.3 功能結(jié)構(gòu) 70
5.3 技術(shù)準(zhǔn)備 71
5.3.1 技術(shù)概覽 71
5.3.2 fake_useragent 模塊的使用 72
5.4 數(shù)據(jù)庫設(shè)計(jì) 73
5.5 功能設(shè)計(jì) 74
5.5.1 分析網(wǎng)頁請(qǐng)求地址 74
5.5.2 獲取電影詳情頁地址 75
5.5.3 爬取電影詳細(xì)信息 76
5.5.4 將爬取的數(shù)據(jù)添加到數(shù)據(jù)庫中 78
5.5.5 定義程序入口 79
5.6 項(xiàng)目運(yùn)行 80
5.7 源碼下載 82
第 6 章分布式爬取動(dòng)態(tài)新聞數(shù)據(jù) 83
Scrapy Scrapy-Redis PyMySQL Redis
6.1 開發(fā)背景 83
6.2 系統(tǒng)設(shè)計(jì) 84
6.2.1 開發(fā)環(huán)境 84
6.2.2 業(yè)務(wù)流程 84
6.2.3 功能結(jié)構(gòu) 85
6.3 技術(shù)準(zhǔn)備 85
6.3.1 技術(shù)概覽 85
6.3.2 Redis 數(shù)據(jù)庫的使用 86
6.3.3 Scrapy-Redis 模塊 87
6.4 創(chuàng)建數(shù)據(jù)表 88
6.5 功能設(shè)計(jì) 89
6.5.1 分析請(qǐng)求地址 90
6.5.2 創(chuàng)建隨機(jī)請(qǐng)求頭 90
6.5.3 創(chuàng)建數(shù)據(jù)對(duì)象 91
6.5.4 將爬取的數(shù)據(jù)寫入 MySQL 數(shù)據(jù)庫中 91
6.5.5 數(shù)據(jù)的爬取與爬蟲項(xiàng)目啟動(dòng) 92
6.5.6 編寫配置文件 93
6.6 項(xiàng)目運(yùn)行 94
6.7 源碼下載 97
第 7 章世界 500 強(qiáng)數(shù)據(jù)爬取與分析 98
pandas matplotlib seaborn lambda 函數(shù)
7.1 開發(fā)背景 98
7.2 系統(tǒng)設(shè)計(jì) 99
7.2.1 開發(fā)環(huán)境 99
7.2.2 業(yè)務(wù)流程 99
7.2.3 功能結(jié)構(gòu) 100
7.3 技術(shù)準(zhǔn)備 100
7.3.1 技術(shù)概覽 100
7.3.2 詳解 read_htlm()獲取網(wǎng)頁數(shù)據(jù)全過程 101
7.3.3 DataFrame 對(duì)象常用方法的使用 102
7.3.4 使用 lambda 函數(shù)快速處理數(shù)據(jù) 105
7.4 數(shù)據(jù)準(zhǔn)備 106
7.4.1 數(shù)據(jù)集介紹 106
7.4.2 確定網(wǎng)頁數(shù)據(jù)的結(jié)構(gòu) 106
7.4.3 爬取數(shù)據(jù) 107
7.4.4 查看數(shù)據(jù) 108
7.5 統(tǒng)計(jì)分析 110
7.5.1 新上榜企業(yè)統(tǒng)計(jì) 110
7.5.2 統(tǒng)計(jì)排名上升的企業(yè) 110
7.5.3 柱狀圖分析世界 500 強(qiáng)排行 TOP10 112
7.5.4 折線圖分析利潤(rùn)前 20 的企業(yè) 113
7.5.5 柱狀圖統(tǒng)計(jì)各國(guó)上榜企業(yè)的總營(yíng)收 115
7.5.6 柱狀圖統(tǒng)計(jì)國(guó)內(nèi)上榜企業(yè)的營(yíng)收情況 115
7.5.7 餅圖分析各國(guó)上榜企業(yè)比例 117
7.6 項(xiàng)目運(yùn)行 119
7.7 源碼下載 120
第 8 章二手房信息智能抓取分析系統(tǒng) 121
requests_html pandas matplotlib multiprocessing
8.1 開發(fā)背景 121
8.2 系統(tǒng)設(shè)計(jì) 122
8.2.1 開發(fā)環(huán)境 122
8.2.2 業(yè)務(wù)流程 122
8.2.3 功能結(jié)構(gòu) 122
8.3 技術(shù)準(zhǔn)備 123
8.3.1 技術(shù)概覽 123
8.3.2 requests_html 模塊的使用 124
8.4 功能設(shè)計(jì) 125
8.4.1 分析網(wǎng)頁數(shù)據(jù)結(jié)構(gòu) 125
8.4.2 爬取二手房數(shù)據(jù) 127
8.4.3 清洗數(shù)據(jù) 129
8.4.4 餅圖顯示各區(qū)二手房數(shù)量所占比例 129
8.4.5 柱狀圖顯示各區(qū)二手房均價(jià) 130
8.4.6 柱狀圖顯示熱門戶型均價(jià) 131
8.4.7 設(shè)計(jì)主菜單 132
8.4.8 定義程序入口 133
8.5 項(xiàng)目運(yùn)行 134
8.6 源碼下載 135
第 9 章圖書熱銷偵探 136
PyQt5 requests PyMySQL matplotlib
9.1 開發(fā)背景 137
9.2 系統(tǒng)設(shè)計(jì) 137
9.2.1 開發(fā)環(huán)境 137
9.2.2 業(yè)務(wù)流程 137
9.2.3 功能結(jié)構(gòu) 138
9.3 技術(shù)預(yù)覽 138
9.4 數(shù)據(jù)庫設(shè)計(jì) 140
9.5 公共模塊設(shè)計(jì) 142
9.5.1 mysql 數(shù)據(jù)庫操作模塊 142
9.5.2 crawl 網(wǎng)絡(luò)爬蟲模塊 144
9.5.3 chart 繪圖模塊 145
9.6 主窗體設(shè)計(jì) 146
9.6.1 窗體 UI 設(shè)計(jì) 146
9.6.2 美化窗體 149
9.6.3 邏輯功能實(shí)現(xiàn) 151
9.7 圖書銷量排行榜窗體設(shè)計(jì) 153
9.7.1 窗體 UI 設(shè)計(jì) 153
9.7.2 美化窗體 155
9.7.3 顯示圖書銷量排行榜 155
9.8 圖書熱評(píng)排行榜窗體設(shè)計(jì) 156
9.8.1 窗體 UI 設(shè)計(jì) 156
9.8.2 美化窗體 158
9.8.3 顯示圖書熱評(píng)排行榜 158
9.9 關(guān)于窗體設(shè)計(jì) 159
9.9.1 窗體 UI 設(shè)計(jì) 159
9.9.2 設(shè)置背景圖片 160
9.10 UI 代碼分離模塊設(shè)計(jì) 161
9.10.1 導(dǎo)入模塊 161
9.10.2 定義公共變量及函數(shù) 161
9.10.3 定義窗體初始化類 161
9.10.4 定義程序入口 162
9.11 項(xiàng)目運(yùn)行 163
9.12 源碼下載 165
第 10 章 APP 數(shù)據(jù)采集先鋒 166
requests BeautifulSoup(bs4) lxml.etree Charles 抓包工具
10.1 開發(fā)背景 166
10.2 系統(tǒng)設(shè)計(jì) 167
10.2.1 開發(fā)環(huán)境 167
10.2.2 業(yè)務(wù)流程 167
10.2.3 功能結(jié)構(gòu) 168
10.3 技術(shù)準(zhǔn)備 168
10.3.1 技術(shù)概覽 168
10.3.2 lxml.etree 模塊的使用 168
10.3.3 Charles 抓包工具的使用 171
10.4 功能設(shè)計(jì) 178
10.4.1 配置手機(jī)端網(wǎng)絡(luò) 178
10.4.2 采集手機(jī) APP 網(wǎng)絡(luò)請(qǐng)求 180
10.4.3 分析數(shù)據(jù)所在的標(biāo)簽位置 183
10.4.4 爬取 APP 數(shù)據(jù) 183
10.5 項(xiàng)目運(yùn)行 184
10.6 源碼下載 185
第 11 章微信智能機(jī)器人 186
requests lxml xpinyin Flask 微信公眾平臺(tái) Ngrok 內(nèi)網(wǎng)穿透工具
11.1 開發(fā)背景 186
11.2 系統(tǒng)設(shè)計(jì) 187
11.2.1 開發(fā)環(huán)境 187
11.2.2 業(yè)務(wù)流程 187
11.2.3 功能結(jié)構(gòu) 187
11.3 技術(shù)準(zhǔn)備 188
11.3.1 技術(shù)概覽 188
11.3.2 lxml 模塊的使用 189
11.3.3 xpinyin 模塊的使用 190
11.3.4 微信公眾平臺(tái)開發(fā) 191
11.3.5 內(nèi)網(wǎng)穿透工具的使用 196
11.4 爬取新聞標(biāo)題 198
11.4.1 頁面分析 198
11.4.2 隨機(jī)爬取一條新聞標(biāo)題 199
11.5 爬取天氣信息 200
11.5.1 頁面分析 201
11.5.2 爬取天氣信息 202
11.6 微信智能機(jī)器人的實(shí)現(xiàn) 203
11.6.1 設(shè)置配置文件 203
11.6.2 校驗(yàn)微信簽名 205
11.6.3 配置微信公眾號(hào) 206
11.6.4 實(shí)現(xiàn)自動(dòng)回復(fù)功能 207
11.6.5 創(chuàng)建主程序文件 209
11.7 項(xiàng)目運(yùn)行 209
11.8 源碼下載 210

你還可能感興趣

我要評(píng)論