← 返回知識庫刷題首頁
P0 · 必會

生成式 AI

大型語言模型的 Token

是什麼

Token 是模型處理文字的基本單位,可能是字、詞或子詞;輸入與輸出 Token 共同影響上下文限制、成本與延遲。

解決什麼問題

這題考如何把題幹線索與大型語言模型的 Token的定義、功能或適用情境正確配對。

考場 Trigger

  • Token 不等於固定一個字或一個詞
  • 它是 tokenizer 切分後的單位

初級深度

理解用途、典型情境與相近概念邊界即可,不需投入工程或研究層級細節。

Official Evidence

官方題目正在怎麼考

4 官方題5 考綱節點
練習這個 Concept(4 題)