course documentation
章末小測試
0. 安裝
1. Transformer 模型
2. 使用 🤗 Transformers
3. 微調一個預訓練模型
4. 分享你的模型和標記器
5. 🤗 Datasets庫
6. 🤗 Tokenizers庫
本章簡介根據已有的 tokenizer 訓練新的 tokenizer快速標記器的特殊能力QA 管道中的快速標記器標準化和預標記化字節對編碼標記化WordPiece 標記化Unigram 標記化逐塊地構建標記器標記器,回顧!章末小測驗
7. 主要的 NLP 任務
8. 如何尋求幫助
9. 構建並分享你的模型
課程活動
章末小測試
這一章涵蓋了很多內容! 如果有一些不太明白的地方,請不要擔心; 下一章將幫助你瞭解這些模塊在底層是如何運作的。
讓我們來測試一下你在這一章學到了什麼!
1. 探索 Hub 並尋找 roberta-large-mnli checkpoint。 它可以完成什麼類型的任務?
2. 下面的代碼將會返回什麼結果?
from transformers import pipeline
ner = pipeline("ner", grouped_entities=True)
ner("My name is Sylvain and I work at Hugging Face in Brooklyn.")3. 在此代碼示例中…的地方應該填寫什麼?
from transformers import pipeline
filler = pipeline("fill-mask", model="bert-base-cased")
result = filler("...")4. 爲什麼這段代碼會無法運行?
from transformers import pipeline
classifier = pipeline("zero-shot-classification")
result = classifier("This is a course about the Transformers library")