久久久久久久性,FC2免费人成在线视频

內(nèi)容簡介

　　互聯(lián)網(wǎng)上存在著大量值得收集的公共信息，而爬蟲技術(shù)就是獲取這些公共信息的主要工具。《Python網(wǎng)絡(luò)爬蟲（Scrapy框架）》以主流的Scrapy爬蟲框架為例，介紹了Python網(wǎng)絡(luò)爬蟲的組成、爬蟲框架的使用以及分布式爬蟲等內(nèi)容?！禤ython網(wǎng)絡(luò)爬蟲（Scrapy框架）》運(yùn)用了大量案例和實(shí)踐，融入了含金量十足的開發(fā)經(jīng)驗，使得內(nèi)容緊密結(jié)合實(shí)際應(yīng)用。在此基礎(chǔ)上，《Python網(wǎng)絡(luò)爬蟲（Scrapy框架）》還通過豐富的練習(xí)和操作實(shí)踐，幫助讀者鞏固所學(xué)的內(nèi)容。《Python網(wǎng)絡(luò)爬蟲（Scrapy框架）》配以多元的學(xué)習(xí)資源和支持服務(wù)，包括視頻、案例素材、學(xué)習(xí)社區(qū)等，為讀者提供全方位的學(xué)習(xí)體驗?！禤ython網(wǎng)絡(luò)爬蟲（Scrapy框架）》適合作為計算機(jī)、大數(shù)據(jù)等相關(guān)專業(yè)的教材，也適合具有一定Linux或Python開發(fā)基礎(chǔ)的人員閱讀，還可以作為爬蟲工程師的學(xué)習(xí)用書。

作者簡介

暫缺《Python網(wǎng)絡(luò)爬蟲（Scrapy框架新技術(shù)技能人才培養(yǎng)系列教程）》作者簡介

圖書目錄

第1章使用第三方庫實(shí)現(xiàn)信息抓取
任務(wù)1 使用第三方庫實(shí)現(xiàn)北京公交站點(diǎn)頁面信息抓取
1．1．1 介紹爬蟲
1．1．2 HTTP
1．1．3 HTML
1．1．4 使用第三方庫實(shí)現(xiàn)爬蟲功能
1．1．5 技能實(shí)訓(xùn)
任務(wù)2 使用第三方庫實(shí)現(xiàn)北京公交站點(diǎn)詳細(xì)信息抓取
1．2．1 lxml庫
1．2．2 第三方庫數(shù)據(jù)抓取及保存
1．2．3 技能實(shí)訓(xùn)
本章小結(jié)
本章作業(yè)
第2章初探Scrapy爬蟲框架
任務(wù)1 安裝Scrapy爬蟲框架并創(chuàng)建爬蟲工程
2．1．1 根據(jù)使用場景劃分爬蟲種類
2．1．2 開發(fā)基于Scrapy爬蟲框架的工程
任務(wù)2 學(xué)習(xí)并掌握Scrapy爬蟲框架各模塊的功能
2．2．1 Scrapy爬蟲工程組成
2．2．2 Scrapy爬蟲框架架構(gòu)
本章小結(jié)
本章作業(yè)
第3章提取網(wǎng)頁數(shù)據(jù)
任務(wù)1 使用Scrapy的選擇器提取豆瓣電影信息
3．1．1 Response對象
3．1．2 css選擇器
3．1．3 多層級網(wǎng)頁爬取
3．1．4 技能實(shí)訓(xùn)
任務(wù)2 使用正則表達(dá)式從電影介紹詳情中提取信息
3．2．1 正則表達(dá)式
3．2．2 技能實(shí)訓(xùn)
本章小結(jié)
本章作業(yè)
第4章 Scrapy數(shù)據(jù)保存（文件、MySQL、MongoDB）
任務(wù)一使用Feed exports將爬取的電影信息保存到常見數(shù)據(jù)格式文件中
4．1．1 Feed exports
4．1．2 技能實(shí)訓(xùn)
任務(wù)2 使用pipeline將爬取的電影信息數(shù)據(jù)保存到數(shù)據(jù)庫中
4．2．1 Python操作MySQL數(shù)據(jù)庫
4．2．2 pipeline模塊
4．2．3 將數(shù)據(jù)保存到MongoDB中
4．2．4 技能實(shí)訓(xùn)
本章小結(jié)
本章作業(yè)
第5章 Scrapy反反爬技術(shù)
任務(wù)1 學(xué)習(xí)反爬蟲和反反爬蟲策略
5．1．1 反爬蟲方法和反反爬蟲策略
5．1．2 Scrapy設(shè)置實(shí)現(xiàn)反反爬
5．1．3 技能實(shí)訓(xùn)
任務(wù)2 學(xué)習(xí)Scrapy框架中*多常用的設(shè)置
……