iPAS 備考專區 登入

iPAS AI 應用規劃師題庫・中級・L21 AI 技術應用與規劃

iPAS 考題解析將連續文本轉換為詞彙單位的方法稱為?

來源標記:中級樣題(114年9月版)

你的作答

解析

正確答案:C. 斷詞 (Tokenization)

Tokenization(斷詞/分詞)是 NLP 的第一步,把一整段文字切成一個個的詞或子詞單位,讓電腦能逐一處理。

每個選項為什麼對或錯

  • A 詞形還原 (Lemmatization) 錯誤選項

    詞形還原是把詞還原為原形(如 running → run),不是切分文本

  • B 停用詞移除 (Stop Words Removal) 錯誤選項

    停用詞移除是刪除不重要的常見詞(如 the、is),不是切分

  • C 斷詞 (Tokenization) 正解

  • D TF-IDF 錯誤選項

    TF-IDF 是計算詞的重要性權重,不是切分文本

答案、題目或解析有問題?回報這題

題目 © 經濟部產業發展署,AITerms.tw 僅作教學解析使用,本站解析以 CC BY-NC-SA 4.0 授權。