網(wǎng)絡(luò)爬蟲

課程內(nèi)容：

爬蟲與數(shù)據(jù)

Scrapy框架

Mongodb+Redis

Scrapy-redis框架

培養(yǎng)目標(biāo)：

可掌握的核心能力： 1.掌握爬蟲的工作原理和設(shè)計(jì)思想；2.掌握反爬蟲機(jī)制； 3.通過學(xué)習(xí)NoSql數(shù)據(jù)庫和Scrapy-redis框架，可以獨(dú)立運(yùn)用分布式爬蟲框架實(shí)現(xiàn)海量數(shù)據(jù)的爬取。

劉老師  

Python+人工智能研究院院長(zhǎng)

原中國日?qǐng)?bào)社客戶端研發(fā)工程師

天津大學(xué)計(jì)算機(jī)科學(xué)與技術(shù)專業(yè)。8年開發(fā)經(jīng)驗(yàn)，4年授課經(jīng)驗(yàn)，曾就職于中國日?qǐng)?bào)社和中國建設(shè)銀行廣開研發(fā)中心，從事新聞大數(shù)據(jù)匯總和建行手機(jī)銀行客戶端研發(fā)工作，有著豐富的前后臺(tái)開發(fā)經(jīng)驗(yàn)。精通網(wǎng)絡(luò)編程、基于CCPP人工智能方向數(shù)據(jù)挖掘、Python框架設(shè)計(jì)等核心技術(shù)。

授課風(fēng)格：通過形象的比喻使學(xué)員更容易理解課程內(nèi)容，深入淺出，樂于分享研究成果。使學(xué)員學(xué)到的不僅僅是知識(shí)，還有實(shí)戰(zhàn)經(jīng)驗(yàn)。

學(xué)后

就業(yè)指導(dǎo)：全部理論+實(shí)戰(zhàn)課程完成后，學(xué)員可以登錄學(xué)習(xí)平臺(tái)，接受一對(duì)一的就業(yè)指導(dǎo)。優(yōu)就業(yè)將根據(jù)學(xué)員自身?xiàng)l件、性格特點(diǎn)等，為學(xué)員指明職業(yè)方向，挖掘求職亮點(diǎn)， 并對(duì)學(xué)員進(jìn)行面試技巧培訓(xùn)，幫助學(xué)員做好就職準(zhǔn)備。

簡(jiǎn)歷修改：優(yōu)就業(yè)提供專屬簡(jiǎn)歷修改服務(wù)，幫助學(xué)員根據(jù)求職企業(yè)要求和特點(diǎn)，進(jìn)行有針對(duì)性的修改。簡(jiǎn)歷亮點(diǎn)突出，契合職位需求，才是卓有成效的名企敲門磚。

名企求職：工作技能get√、實(shí)戰(zhàn)能力get√、就業(yè)準(zhǔn)備get√以后，相信有志者，不懈努力，能夠進(jìn)入名企。

帶索引的列表迭代

teams = ["Packers", "49ers", "Ravens", "Patriots"]

for index, team in enumerate(teams):

print index, team

>>> 0 Packers

>>> 1 49ers

>>> 2 Ravens

>>> 3 Patriots

Python使用'(單引號(hào))和"(雙引號(hào))來表示字符串。與Perl、Unix Shell語言或者Ruby、Groovy等語言不一樣，兩種符號(hào)作用相同。一般地，如果字符串中出現(xiàn)了雙引號(hào)，就使用單引號(hào)來表示字符串;反之則使用雙引號(hào)。如果都沒有出現(xiàn)，就依個(gè)人喜好選擇。出現(xiàn)在字符串中的\(反斜杠)被解釋為特殊字符，比如\n表示換行符。表達(dá)式前加r指示Python不解釋字符串中出現(xiàn)的\。這種寫法通常用于編寫正則表達(dá)式或者Windows文件路徑。

Python支持列表切割(list slices)，可以取得完整列表的一部分。支持切割操作的類型有str, bytes, list, tuple等。它的語法是...[left:right]或者...[left:right:stride]。假定nums變量的值是[1, 3, 5, 7, 8, 13, 20]，那么下面幾個(gè)語句為真：

nums[2:5] == [5, 7, 8] 從下標(biāo)為2的元素切割到下標(biāo)為5的元素，但不包含下標(biāo)為5的元素。

nums[1:] == [3, 5, 7, 8, 13, 20] 切割到最后一個(gè)元素。

nums[:-3] == [1, 3, 5, 7] 從最開始的元素一直切割到倒數(shù)第3個(gè)元素。

nums[:] == [1, 3, 5, 7, 8, 13, 20] 返回所有元素。改變新的列表不會(huì)影響到nums。

nums[1:5:2] == [3, 7] 從下標(biāo)為1的元素切割到下標(biāo)為5的元素但不包含下標(biāo)為5的元素，且步長(zhǎng)為2。