本書由七個項目組成，分為初識網(wǎng)絡爬蟲、基于Python庫實現(xiàn)靜態(tài)數(shù)據(jù)采集、基于urllib實現(xiàn)客戶端數(shù)據(jù)采集、基于Requests-HTML實現(xiàn)動態(tài)數(shù)據(jù)采集、基于Scrapy框架實現(xiàn)網(wǎng)頁數(shù)據(jù)采集、基于Scrapy-redis分布式實現(xiàn)網(wǎng)頁數(shù)據(jù)采集以及基于自動化測試工具實現(xiàn)網(wǎng)頁數(shù)據(jù)采集。