工具集基礎(chǔ)用例演示篇
第1章 HuggingFace簡(jiǎn)介
第2章 使用編碼工具
2.1 編碼工具簡(jiǎn)介
2.2 編碼工具工作流示意
2.3 使用編碼工具
2.4 小結(jié)
第3章 使用數(shù)據(jù)集工具
3.1 數(shù)據(jù)集工具介紹
3.2 使用數(shù)據(jù)集工具
3.2.1 數(shù)據(jù)集加載和保存
3.2.2 數(shù)據(jù)集基本操作
3.2.3 將數(shù)據(jù)集保存為其他格式
3.3 小結(jié)
第4章 使用評(píng)價(jià)指標(biāo)工具
4.1 評(píng)價(jià)指標(biāo)工具介紹
4.2 使用評(píng)價(jià)指標(biāo)工具
4.3 小結(jié)
第5章 使用管道工具
5.1 管道工具介紹
5.2 使用管道工具
5.2.1 常見(jiàn)任務(wù)演示
5.2.2 替換模型執(zhí)行任務(wù)
5.3 小結(jié)
第6章 使用訓(xùn)練工具
6.1 訓(xùn)練工具介紹
6.2 使用訓(xùn)練工具
6.2.1 準(zhǔn)備數(shù)據(jù)集
6.2.2 定義模型和訓(xùn)練工具
6.2.3 訓(xùn)練和測(cè)試
6.3 小結(jié)
中文項(xiàng)目實(shí)戰(zhàn)篇
第7章 實(shí)戰(zhàn)任務(wù)1：中文情感分類(lèi)
7.1 任務(wù)簡(jiǎn)介
7.2 數(shù)據(jù)集介紹
7.3 模型架構(gòu)
7.4 實(shí)現(xiàn)代碼
7.4.1 準(zhǔn)備數(shù)據(jù)集
7.4.2 定義模型
7.4.3 訓(xùn)練和測(cè)試
7.5 小結(jié)
第8章 實(shí)戰(zhàn)任務(wù)2：中文填空
8.1 任務(wù)簡(jiǎn)介
8.2 數(shù)據(jù)集介紹
8.3 模型架構(gòu)
8.4 實(shí)現(xiàn)代碼
8.4.1 準(zhǔn)備數(shù)據(jù)集
8.4.2 定義模型
8.4.3 訓(xùn)練和測(cè)試
8.5 小結(jié)
第9章 實(shí)戰(zhàn)任務(wù)3：中文句子關(guān)系推斷
9.1 任務(wù)簡(jiǎn)介
9.2 數(shù)據(jù)集介紹
9.3 模型架構(gòu)
9.4 實(shí)現(xiàn)代碼
9.4.1 準(zhǔn)備數(shù)據(jù)集
9.4.2 定義模型
9.4.3 訓(xùn)練和測(cè)試
9.5 小結(jié)
第10章 實(shí)戰(zhàn)任務(wù)4：中文命名實(shí)體識(shí)別
10.1 任務(wù)簡(jiǎn)介
10.2 數(shù)據(jù)集介紹
10.3 模型架構(gòu)
10.4 實(shí)現(xiàn)代碼
10.4.1 準(zhǔn)備數(shù)據(jù)集
10.4.2 定義模型
10.4.3 訓(xùn)練和測(cè)試
10.5 小結(jié)
第11章 使用TensorFlow訓(xùn)練
11.1 任務(wù)簡(jiǎn)介
11.2 數(shù)據(jù)集介紹
11.3 模型架構(gòu)
11.4 實(shí)現(xiàn)代碼
11.4.1 準(zhǔn)備數(shù)據(jù)集
11.4.2 定義模型
11.4.3 訓(xùn)練和測(cè)試
11.5 小結(jié)
第12章 使用自動(dòng)模型
12.1 任務(wù)簡(jiǎn)介
12.2 數(shù)據(jù)集介紹
12.3 模型架構(gòu)
12.4 實(shí)現(xiàn)代碼
12.4.1 準(zhǔn)備數(shù)據(jù)集
12.4.2 加載自動(dòng)模型
12.4.3 訓(xùn)練和測(cè)試
12.5 深入自動(dòng)模型源代碼
12.6 小結(jié)
預(yù)訓(xùn)練模型底層原理篇
第13章 手動(dòng)實(shí)現(xiàn)Transformer
13.1 Transformer架構(gòu)
13.2 注意力
13.2.1 為什么需要注意力
13.2.2 注意力的計(jì)算過(guò)程
13.2.3 注意力計(jì)算的矩陣形式
13.2.4 多頭注意力
13.3 位置編碼
13.3.1 為什么需要位置編碼
13.3.2 位置編碼計(jì)算過(guò)程
13.4 MASK
13.4.1 PAD MASK
13.4.2 上三角MASK
13.5 Transformer計(jì)算流程
13.5.1 編碼器
13.5.2 整體計(jì)算流程
13.5.3 解碼器解碼過(guò)程詳細(xì)講解
13.5.4 總體架構(gòu)
13.6 簡(jiǎn)單翻譯任務(wù)
13.6.1 任務(wù)介紹
13.6.2 定義數(shù)據(jù)集
13.6.3 定義MASK函數(shù)
13.6.4 定義Transformer工具子層
13.6.5 定義Transformer模型
13.6.6 訓(xùn)練和測(cè)試
13.7 兩數(shù)相加任務(wù)
13.7.1 任務(wù)介紹
13.7.2 實(shí)現(xiàn)代碼
13.7.3 訓(xùn)練和測(cè)試
13.8 小結(jié)
第14章 手動(dòng)實(shí)現(xiàn)BERT
14.1 BERT架構(gòu)
14.2 數(shù)據(jù)集處理
14.2.1 數(shù)據(jù)處理過(guò)程概述
14.2.2 數(shù)據(jù)集介紹
14.2.3 數(shù)據(jù)處理實(shí)現(xiàn)代碼
14.3 PyTorch提供的Transformer工具層介紹
14.4 手動(dòng)實(shí)現(xiàn)BERT模型
14.4.1 準(zhǔn)備數(shù)據(jù)集
14.4.2 定義輔助函數(shù)
14.4.3 定義BERT模型
14.4.4 訓(xùn)練和測(cè)試
14.5 小結(jié)