Python自然語言處理實(shí)戰(zhàn)

第1章 起步　　1
1．1　NLP中的基本概念和術(shù)語　1
1．1．1　文本語料庫　1
1．1．2　段落　2
1．1．3　句子　2
1．1．4　短語和單詞　2
1．1．5　n元語法　2
1．1．6　詞袋　2
1．2　NLP技術(shù)的應(yīng)用　3
1．2．1　情感分析　3
1．2．2　命名實(shí)體識(shí)別　4
1．2．3　實(shí)體鏈接　5
1．2．4　文本翻譯　6
1．2．5　自然語言推理　6
1．2．6　語義角色標(biāo)記　6
1．2．7　關(guān)系提取　7
1．2．8　SQL查詢生成或語義解析　8
1．2．9　機(jī)器閱讀理解　8
1．2．10　文字蘊(yùn)含　10
1．2．11　指代消解　10
1．2．12　搜索　11
1．2．13　問答和聊天機(jī)器人　11
1．2．14　文本轉(zhuǎn)語音　12
1．2．15　語音轉(zhuǎn)文本　13
1．2．16　說話人識(shí)別　14
1．2．17　口語對(duì)話系統(tǒng)　14
1．2．18　其他應(yīng)用　14
1．3　小結(jié)　15
第2章　使用NLTK進(jìn)行文本分類和詞性標(biāo)注　16
2．1　安裝NLTK 及其模塊　16
2．2　文本預(yù)處理及探索性分析　18
2．2．1　分詞　18
2．2．2　詞干提取　19
2．2．3　去除停用詞　20
2．2．4　探索性分析　20
2．3　詞性標(biāo)注　24
2．3．1　詞性標(biāo)注定義　24
2．3．2　詞性標(biāo)注的應(yīng)用　25
2．3．3　訓(xùn)練詞性標(biāo)注器　25
2．4　訓(xùn)練影評(píng)情感分類器　29
2．5　訓(xùn)練詞袋分類器　32
2．6　小結(jié)　34
第3章　深度學(xué)習(xí)和TensorFlow　35
3．1　深度學(xué)習(xí)　35
3．1．1　感知器　35
3．1．2　激活函數(shù)　36
3．1．3　神經(jīng)網(wǎng)絡(luò)　38
3．1．4　訓(xùn)練神經(jīng)網(wǎng)絡(luò)　40
3．1．5　卷積神經(jīng)網(wǎng)絡(luò)　43
3．1．6　遞歸神經(jīng)網(wǎng)絡(luò)　44
3．2　TensorFlow　45
3．2．1　通用圖形處理單元　45
3．2．2　安裝　46
3．2．3　Hello world !　47
3．2．4　兩數(shù)相加　47
3．2．5　TensorBoard　48
3．2．6　Keras庫　49
3．3　小結(jié)　49
第4章　使用淺層模型進(jìn)行語義嵌入　50
4．1　詞向量　50
4．1．1　經(jīng)典方法　50
4．1．2　Word2vec　51
4．1．3　連續(xù)詞袋模型　52
4．1．4　跳字模型　53
4．2　從單詞到文檔嵌入　59
4．3　Sentence2vec　59
4．4　Doc2vec　60
4．5　小結(jié)　63
第5章　使用LSTM進(jìn)行文本分類　64
5．1　文本分類數(shù)據(jù)　64
5．2　主題建?！?5
5．3　用于文本分類的深度學(xué)習(xí)元架構(gòu)　68
5．3．1　嵌入層　68
5．3．2　深層表示　68
5．3．3　全連接部分　68
5．4　使用RNN識(shí)別YouTube視頻垃圾評(píng)論　69
5．5　使用CNN對(duì)新聞主題分類　73
5．6　使用GloVe嵌入進(jìn)行遷移學(xué)習(xí)　76
5．7　多標(biāo)簽分類　79
5．7．1　二元關(guān)聯(lián)　80
5．7．2　用于多標(biāo)簽分類的深度學(xué)習(xí)　80
5．7．3　用于文檔分類的attention網(wǎng)絡(luò)　81
5．8　小結(jié)　83
第6章　使用CNN進(jìn)行搜索和去重　84
6．1　數(shù)據(jù)　84
6．2　模型訓(xùn)練　85
6．2．1　文本編碼　86
6．2．2　建立CNN模型　87
6．2．3　訓(xùn)練　89
6．2．4　推理　91
6．3　小結(jié)　92
第7章　使用字符級(jí)LSTM進(jìn)行命名實(shí)體識(shí)別　93
7．1　使用深度學(xué)習(xí)實(shí)現(xiàn)NER　93
7．1．1　數(shù)據(jù)　94
7．1．2　模型　95
7．1．3　代碼詳解　96
7．1．4　不同預(yù)訓(xùn)練詞嵌入的影響　98
7．1．5　改進(jìn)空間　105
7．2　小結(jié)　105
第8章　使用GRU 進(jìn)行文本生成和文本摘要　106
8．1　使用RNN進(jìn)行文本生成　106
8．2　文本摘要　112
8．2．1　提取式摘要　112
8．2．2　抽象式摘要　114
8．2．3　最新抽象式文本摘要　123
8．3　小結(jié)　125
第9章　使用記憶網(wǎng)絡(luò)完成問答任務(wù)和編寫聊天機(jī)器人　127
9．1　QA任務(wù)　127
9．2　用于QA任務(wù)的記憶網(wǎng)絡(luò)　128
9．2．1　記憶網(wǎng)絡(luò)管道概述　128
9．2．2　使用TensorFlow寫一個(gè)記憶網(wǎng)絡(luò)　129
9．3　拓展記憶網(wǎng)絡(luò)以進(jìn)行對(duì)話建模　134
9．3．1　對(duì)話數(shù)據(jù)集　134
9．3．2　使用TensorFlow編寫一個(gè)聊天機(jī)器人　137
9．3．3　記憶網(wǎng)絡(luò)相關(guān)文獻(xiàn)　146
9．4　小結(jié)　146
第10章　使用基于attention的模型進(jìn)行機(jī)器翻譯　147
10．1　機(jī)器翻譯概述　147
10．1．1　統(tǒng)計(jì)機(jī)器翻譯　147
10．1．2　神經(jīng)機(jī)器翻譯　150
10．2　小結(jié)　163
第11章　使用DeepSpeech進(jìn)行語音識(shí)別　164
11．1　語音識(shí)別概述　164
11．2　建立用于語音識(shí)別的RNN模型　165
11．2．1　語音信號(hào)表示　165
11．2．2　用于語音數(shù)字識(shí)別的LSTM模型　167
11．2．3　TensorBoard可視化　168
11．2．4　使用DeepSpeech架構(gòu)的語音轉(zhuǎn)文本模型　169
11．2．5　語音識(shí)別最新技術(shù)　178
11．3　小結(jié)　179
第12章　使用Tacotron進(jìn)行文本轉(zhuǎn)語音　180
12．1　TTS領(lǐng)域概述　181
12．1．1　自然性與可懂性　181
12．1．2　TTS系統(tǒng)表現(xiàn)的評(píng)估方式　181
12．1．3　傳統(tǒng)技術(shù)——級(jí)聯(lián)模型和參數(shù)模型　182
12．1．4　關(guān)于頻譜圖和梅爾標(biāo)度的一些提醒　182
12．2　深度學(xué)習(xí)中的TTS　185
12．2．1　WaveNet簡介　186
12．2．2　Tacotron　186
12．3　利用Keras的Tacotron實(shí)現(xiàn)　191
12．3．1　數(shù)據(jù)集　192
12．3．2　數(shù)據(jù)準(zhǔn)備　192
12．3．3　架構(gòu)實(shí)現(xiàn)　196
12．3．4　訓(xùn)練與測試　200
12．4　小結(jié)　201
第13章　部署訓(xùn)練好的模型　202
13．1　性能提升　202
13．1．1　量化權(quán)重　202
13．1．2　MobileNets　203
13．2　TensorFlow Serving　205
13．2．1　導(dǎo)出訓(xùn)練好的模型　206
13．2．2　把導(dǎo)出模型投入服務(wù)　207
13．3　在云上部署　207
13．3．1　Amazon Web Services　207
13．3．2　Google Cloud Platform　210
13．4　在移動(dòng)設(shè)備上部署　213
13．4．1　iPhone　213
13．4．2　Android　213
13．5　小結(jié)　213