網(wǎng)絡(luò)爬蟲-Python和數(shù)據(jù)分析從技術(shù)、工具與實(shí)戰(zhàn)3個維度講解了Python網(wǎng)絡(luò)爬蟲：

技術(shù)維度：詳細(xì)講解了Python網(wǎng)絡(luò)爬蟲實(shí)現(xiàn)的核心技術(shù)，包括網(wǎng)絡(luò)爬蟲的工作原理、如何用urllib庫編寫網(wǎng)絡(luò)爬蟲、爬蟲的異常處理、正則表達(dá)式、爬蟲中Cookie的使用、爬蟲的瀏覽器偽裝技術(shù)、定向爬取技術(shù)、反爬蟲技術(shù)，以及如何自己動手編寫網(wǎng)絡(luò)爬蟲；

工具維度：以流行的Python網(wǎng)絡(luò)爬蟲框架Scrapy為對象，詳細(xì)講解了Scrapy的功能使用、高級技巧、架構(gòu)設(shè)計、實(shí)現(xiàn)原理，以及如何通過Scrapy來更便捷、高效地編寫網(wǎng)絡(luò)爬蟲；

實(shí)戰(zhàn)維度：以實(shí)戰(zhàn)為導(dǎo)向，是本書的主旨，除了完全通過手動編程實(shí)現(xiàn)網(wǎng)絡(luò)爬蟲和通過Scrapy框架實(shí)現(xiàn)網(wǎng)絡(luò)爬蟲的實(shí)戰(zhàn)案例以外，本書還有博客爬取、圖片爬取、模擬登錄等多個綜合性的網(wǎng)絡(luò)爬蟲實(shí)踐案例。

章節(jié)目錄

第一篇　理論基礎(chǔ)篇

第1章　什么是網(wǎng)絡(luò)爬蟲 3

1.1　初識網(wǎng)絡(luò)爬蟲 3

1.2　為什么要學(xué)網(wǎng)絡(luò)爬蟲 4

1.3　網(wǎng)絡(luò)爬蟲的組成 5

1.4　網(wǎng)絡(luò)爬蟲的類型 6

1.5　爬蟲擴(kuò)展——聚焦爬蟲 7

1.6　小結(jié) 8

第2章　網(wǎng)絡(luò)爬蟲技能總覽 9

2.1　網(wǎng)絡(luò)爬蟲技能總覽圖 9

2.2　搜索引擎核心 10

2.3　用戶爬蟲的那些事兒 11

2.4　小結(jié) 12

第二篇　核心技術(shù)篇

第3章　網(wǎng)絡(luò)爬蟲實(shí)現(xiàn)原理與實(shí)現(xiàn)技術(shù) 15

3.1　網(wǎng)絡(luò)爬蟲實(shí)現(xiàn)原理詳解 15

3.2　爬行策略 17

3.3　網(wǎng)頁更新策略 18

3.4　網(wǎng)頁分析算法 20

3.5　身份識別 21

3.6　網(wǎng)絡(luò)爬蟲實(shí)現(xiàn)技術(shù) 21

3.7　實(shí)例——metaseeker 22

3.8　小結(jié) 27