P0 · 必會
生成式 AI
大型語言模型的 Token
是什麼
Token 是模型處理文字的基本單位,可能是字、詞或子詞;輸入與輸出 Token 共同影響上下文限制、成本與延遲。
解決什麼問題
這題考如何把題幹線索與大型語言模型的 Token的定義、功能或適用情境正確配對。
考場 Trigger
- Token 不等於固定一個字或一個詞
- 它是 tokenizer 切分後的單位
初級深度
理解用途、典型情境與相近概念邊界即可,不需投入工程或研究層級細節。
生成式 AI
是什麼
Token 是模型處理文字的基本單位,可能是字、詞或子詞;輸入與輸出 Token 共同影響上下文限制、成本與延遲。
解決什麼問題
這題考如何把題幹線索與大型語言模型的 Token的定義、功能或適用情境正確配對。
考場 Trigger
初級深度
理解用途、典型情境與相近概念邊界即可,不需投入工程或研究層級細節。
Official Evidence