 |
-- 會員 / 註冊 --
|
 |
|
|
|
零基礎學Python網絡爬蟲案例實戰全流程詳解（高級進階篇） ( 簡體 字) |
| 作者：王宇韜,吳子湛,史靖涵 | 類別：1. -> 程式設計 -> Python
2. -> 程式設計 -> 網路爬蟲 |
| 譯者： |
| 出版社：機械工業出版社 |  3dWoo書號： 54767
詢問書籍請說出此書號！【有庫存】
NT售價： 450 元 |
| 出版日：7/1/2021 |
| 頁數：272 |
| 光碟數：0 |
|
站長推薦：  |
| 印刷：黑白印刷 | 語系： ( 簡體 版 ) |
| |
加入購物車  │加到我的最愛
(請先登入會員) |
| ISBN：9787111684749 |
| 作者序 | 譯者序 | 前言 | 內容簡介 | 目錄 | 序 |
| (簡體書上所述之下載連結耗時費功, 恕不適用在台灣, 若讀者需要請自行嘗試, 恕不保證) |
| 作者序： |
| 譯者序： |
| 前言： |
內容簡介：在這個數據為王的時代，無論是從事何種行業，每天都會與海量的且各種類型的數據打交道，如何從這些數據中獲取需要的信息，并進行相應的分析和可視化展示，是很多程序員和職場人士非常關心的一個問題。
本書以功能強大且上手操作容易的Python語言為基礎，主要講解Python爬蟲的高級進階技巧，主要側重于各種應對網站反爬的相關技巧、爬蟲框架、爬蟲服務器部署等相關知識點。
本書共分8章，核心主題包括如何通過Cookie模擬登錄網站從而解決網站反爬問題，如何通過進行驗證碼反爬識別，如何破解Ajax動態請求，講解Webdriver攔截等其他反爬手段識別，如何進行手機APP爬蟲，Scrapy爬蟲框架，如何利用Scrapy爬蟲框架應對反爬，爬蟲的云服務器部署等。此外，書中對實際案例進行分析，讓讀者更好地理解和掌握爬蟲知識。
本書適合各行各業的數據分析從業人員學習，也適合想要提高工作效率的職場人士，對于Python編程感興趣的讀者，本書也是一本不錯的參考讀物。 |
目錄：本書學習資源
第1章 Cookie模擬登錄
1.1 Cookie模擬登錄的原理 11
1.1.1 客戶端與服務端 11
1.1.2 HTTP的無狀態性 12
1.1.3 Cookie的含義與作用 13
1.1.4 Session的含義與作用 16
1.1.5 Cookie與Session的交互 17
1.2 案例實戰1：模擬登錄淘寶并爬取數據 20
1.2.1 獲取Cookie模擬登錄淘寶 20
1.2.2 爬取淘寶商品數據 25
1.3 案例實戰2：模擬登錄新浪微博并爬取數據 29
1.3.1 獲取Cookie模擬登錄新浪微博 30
1.3.2 爬取新浪微博熱搜榜信息 34
★ 課后習題 38
第2章 驗證碼反爬的應對
2.1 圖像驗證碼 39
2.1.1 超級鷹平臺注冊 40
2.1.2 超級鷹Python接口的使用 41
2.1.3 案例實戰：英文驗證碼和中文驗證碼識別 46
2.2 計算題驗證碼 51
2.3 滑塊驗證碼 54
2.4 滑動拼圖驗證碼 57
2.4.1 初級版滑動拼圖驗證碼 59
2.4.2 高級版滑動拼圖驗證碼 63
2.5 點選驗證碼 68
2.5.1 本地網頁識別 69
2.5.2 bilibili點選驗證碼識別初探 75
2.5.3 bilibili點選驗證碼識別升級：無限嘗試版 80
★ 課后習題 85
第3章 Ajax動態請求破解
3.1 Ajax簡介 86
3.1.1 不同的網頁翻頁方式的對比 86
3.1.2 Ajax的基本概念與工作原理 88
3.2 案例實戰1：爬取開源中國博客頻道 89
3.2.1 分析Ajax請求 89
3.2.2 爬取單頁博客 92
3.2.3 爬取多頁博客 96
3.3 案例實戰2：爬取新浪微博 98
3.3.1 模擬登錄新浪微博 100
3.3.2 分析單個微博頁面 101
3.3.3 破解Ajax請求爬取多頁 103
★ 課后習題 108
第4章 手機App內容爬取
4.1 相關軟件安裝 109
4.1.1 安裝夜神模擬器 110
4.1.2 安裝Node.js 111
4.1.3 安裝JDK 113
4.1.4 安裝Android Studio 117
4.1.5 安裝Appium 118
4.1.6 安裝Appium-Python-Client庫 118
4.2 手機模擬操作初步嘗試 119
4.2.1 用Android Studio連接夜神模擬器 119
4.2.2 用Python連接微信App 121
4.3 Appium基本操作與進階操作 123
4.3.1 Appium基本操作 123
4.3.2 Appium進階操作 126
4.4 案例實戰：爬取微信朋友圈內容 132
4.4.1 獲取微信朋友圈頁面源代碼 133
4.4.2 提取微信朋友圈內容 135
4.5 多開模擬器打開多個微信 138
4.5.1 多開模擬器 138
4.5.2 用Appium連接多個模擬器 139
★ 課后習題 143
第5章 Scrapy爬蟲框架
5.1 Scrapy框架基礎 144
5.1.1 Scrapy的安裝方法 144
5.1.2 Scrapy的整體架構 146
5.1.3 Scrapy的常用指令 148
5.2 案例實戰1：百度新聞爬取 156
5.2.1 Robots協議破解 157
5.2.2 User-Agent設置 158
5.2.3 百度新聞標題爬取 159
5.3 案例實戰2：新浪新聞爬取 160
5.3.1 實體文件設置 161
5.3.2 新浪新聞爬取：爬取一條新聞 162
5.3.3 新浪新聞爬取：爬取多條新聞 166
5.3.4 新浪新聞爬取：生成文本文件報告 167
5.4 案例實戰3：豆瓣電影海報圖片爬取 170
5.4.1 用常規方法爬取 170
5.4.2 用Scrapy爬取 171
5.5 知識拓展：Python類的相關知識 176
5.5.1 類和對象的概念 176
5.5.2 類名、屬性和方法 176
5.5.3 類的進階知識 179
★ 課后習題 182
第6章 Scrapy應對反爬
6.1 中間件技術概述 183
6.1.1 下載器中間件 184
6.1.2 爬蟲中間件 184
6.2 Scrapy+IP代理：爬取搜狗圖片 185
6.2.1 用Requests庫批量下載圖片 186
6.2.2 用Scrapy框架批量下載圖片 198
6.3 Scrapy+Cookie：模擬登錄淘寶 202
6.3.1 在中間件文件中添加Cookie 202
6.3.2 編寫并運行爬蟲文件：爬取淘寶網頁 204
6.4 Scrapy+Selenium庫：爬取第一財經新聞 206
6.4.1 在中間件文件中添加Selenium庫 207
6.4.2 編寫并運行爬蟲文件：爬取新聞信息 209
★ 課后習題 214
第7章 爬蟲云服務器部署
7.1 HTML網頁制作進階 215
7.1.1 表格 217
7.1.2 列表 218
7.1.3 樣式設計 220
7.1.4 背景設置 228
7.2 Flask Web編程基礎 232
7.2.1 Flask入門 232
7.2.2 用render_template()函數渲染頁面 237
7.2.3 用Flask連接數據庫 242
7.3 Flask Web編程實戰 247
7.3.1 展示單家公司的數據 247
7.3.2 展示多家公司的數據 252
7.3.3 展示輿情評分 255
7.3.4 只展示當天新聞 257
7.3.5 只展示負面新聞 258
7.4 云服務器的購買和登錄 261
7.5 程序云端部署及網站搭建 265
7.5.1 搭建程序的運行環境 265
7.5.2 程序24小時運行及Flask項目部署 266
7.5.3 域名申請和使用 267
★ 課后習題 270 |
| 序： |
|
