iPAS 考題解析將連續文本轉換為詞彙單位的方法稱為?
你的作答
在題目頁作答不會存進學習紀錄,想留下紀錄可以到題庫練習。
解析
正確答案:C. 斷詞 (Tokenization)
Tokenization(斷詞/分詞)是 NLP 的第一步,把一整段文字切成一個個的詞或子詞單位,讓電腦能逐一處理。
每個選項為什麼對或錯
-
A 詞形還原 (Lemmatization) 錯誤選項
詞形還原是把詞還原為原形(如 running → run),不是切分文本
-
B 停用詞移除 (Stop Words Removal) 錯誤選項
停用詞移除是刪除不重要的常見詞(如 the、is),不是切分
-
C 斷詞 (Tokenization) 正解
-
D TF-IDF 錯誤選項
TF-IDF 是計算詞的重要性權重,不是切分文本
答案、題目或解析有問題?回報這題