深度學(xué)習(xí)的高級議題

第1章 卷積網(wǎng)絡(luò) 1
1.1 轉(zhuǎn)置卷積 2
1.1.1 概念 2
1.1.2 運算過程 2
1.1.3 應(yīng)用場景 5
1.2 空洞卷積 7
1.2.1 概念 7
1.2.2 工作原理 8
1.2.3 應(yīng)用場景 10
1.3 深度可分離卷積 11
1.3.1 概念 11
1.3.2 工作原理 11
1.3.3 應(yīng)用場景 15
1.4 三維卷積 15
1.4.1 概念 15
1.4.2 工作原理 16
1.4.3 應(yīng)用場景 19
第2章 新型結(jié)構(gòu) 20
2.1 殘余連接 20
2.2 ResNeXt原理及架構(gòu) 23
2.3 FCN原理及架構(gòu) 28
2.4 U-Net原理及架構(gòu) 32
2.5 FPN原理及架構(gòu) 36
第3章 注意力機(jī)制 43
3.1 注意力機(jī)制的生物學(xué)原理及數(shù)學(xué)本質(zhì) 43
3.2 應(yīng)用于RNN的注意力機(jī)制 48
3.3 自注意力的數(shù)學(xué)支撐：像素間的協(xié)方差 53
3.4 自注意力機(jī)制的直觀展示及舉例 58
3.5 Transformer中的注意力機(jī)制 60
3.6 擠壓激勵網(wǎng)絡(luò) 66
3.7 Transformer編碼器代碼 69
3.8 Transformer詞嵌入中融入位置信息 77
第4章 模型壓縮 84
4.1 模型壓縮的必要性及常用方法 84
4.2 修剪深度神經(jīng)網(wǎng)絡(luò) 87
4.3 模型量化 90
4.4 知識蒸餾 96
4.4.1 知識蒸餾的實現(xiàn)步驟 97
4.4.2 軟目標(biāo)的作用 97
4.4.3 蒸餾“溫度” 100
4.4.4 特征蒸餾 102
第5章 自監(jiān)督學(xué)習(xí) 105
5.1 什么是自監(jiān)督學(xué)習(xí) 105
5.2 Bert中的自監(jiān)督學(xué)習(xí) 106
第6章 目標(biāo)檢測中的高級技巧 110
6.1 特征融合 110
6.2 DenseNet與ResNet 111
6.3 晚融合及特征金字塔網(wǎng)絡(luò) 115
6.4 YOLOv3中的三級特征融合 118
6.5 通過多尺度特征圖跳過連接改進(jìn)SSD方法 120
第7章 無監(jiān)督學(xué)習(xí) 123
第8章 Transformer高級篇 125
8.1 計算機(jī)視覺中的Transformer 125
8.1.1 什么是ViT 125
8.1.2 ViT詳解 127
8.2 DeiT：以合理的方式訓(xùn)練ViT 129
8.3 金字塔視覺Transformer 131
8.3.1 PVT整體架構(gòu) 132
8.3.2 SRA的實現(xiàn) 133
8.3.3 PVT的改進(jìn) 134
8.4 Swin Transformer：使用“移動窗口”的分層ViT 136
8.5 視覺Transformer的自監(jiān)督訓(xùn)練：DINO 140
8.5.1 DINO架構(gòu) 140
8.5.2 中心化和“教師”網(wǎng)絡(luò)權(quán)重更新 142
8.5.3 DINO代碼實踐偽碼和效果展示 142
8.6 縮放視覺Transformer 145
8.7 一些有趣的進(jìn)展 146
8.7.1 替代自注意力機(jī)制 147
8.7.2 多尺度視覺Transformer（MViT） 149
8.7.3 完全基于Transformer的視頻理解框架 151
8.7.4 語義分割中的ViT（SegFormer） 152
8.7.5 醫(yī)學(xué)成像中的ViT 156
第9章 圖神經(jīng)網(wǎng)絡(luò) 160
9.1 圖數(shù)據(jù) 161
9.1.1 圖像作為圖數(shù)據(jù) 162
9.1.2 文本作為圖數(shù)據(jù) 162
9.1.3 天然的圖數(shù)據(jù) 163
9.2 圖上的預(yù)測任務(wù) 165
9.3 圖神經(jīng)網(wǎng)絡(luò)構(gòu)建應(yīng)用 168
9.3.1 最簡單的GNN 168
9.3.2 通過聚合信息進(jìn)行GNN預(yù)測 169
9.3.3 在圖的各屬性之間傳遞消息 171
9.3.4 學(xué)習(xí)邊緣表示 172
9.3.5 添加全局表示 172
第10章 元學(xué)習(xí) 174
10.1 什么是元學(xué)習(xí) 174
10.2 機(jī)器學(xué)習(xí)與元學(xué)習(xí) 175
10.2.1 機(jī)器學(xué)習(xí)簡介 175
10.2.2 元學(xué)習(xí)簡介 177
10.2.3 機(jī)器學(xué)習(xí)與元學(xué)習(xí) 181
10.3 模型無關(guān)的元學(xué)習(xí)：MAML 183
10.3.1 MAML簡介 183
10.3.2 MAML特點 183
10.3.3 MAML為什么能夠起作用 184
參考文獻(xiàn) 186