iPAS 備考專區 登入

iPAS AI 應用規劃師 初級 科目二 生成式 AI 應用與規劃・115 年第一次・L12・第 38 題

PoC 概念驗證階段,不該做哪件事?

原題

某企業規劃導入生成式 AI 助理,在正式全面部署前進行概念驗證(PoC),下列何者最不適合作為此階段的主要工作?

白話

一家企業在正式全面部署生成式 AI 助理之前,先做概念驗證(PoC,Proof of Concept),也就是小規模試跑,確認這個方向可行再繼續推進。

問你:以下哪件事最不適合在 PoC 這個階段做?

一句話總結

PoC 在做「這個技術行不行、有沒有用」的驗證,「制定跨部門使用規範與長期治理框架」是系統確認要全面部署後才做的組織建設工作,在 PoC 還沒確認可行性時就做這件事,等於還沒選好菜就先買餐具,時序錯誤。

情境

先感受問題:PoC 是什麼,它在整個導入流程的哪個位置?

「智慧銀行」的數位長美雅,要把生成式 AI 助理導入行內,幫行員處理客戶諮詢。她很清醒:這個投資很大,萬一 AI 答非所問、給出錯誤的金融建議,後果嚴重。

所以她先做 PoC:挑一個部門、100 個真實客戶問題,讓 AI 助理試答,行員評分。目的是在「花大錢全面部署」之前,先確認幾件事:

  • 這個 AI 在銀行業務的實際問題上,回覆品質夠不夠好?
  • AI 的能力和行員的業務需求有沒有對上?
  • 技術上能不能跟現有核心銀行系統串接?

這些都是「驗證可行性」的工作。

什麼不屬於 PoC 範圍?「制定全行 3,000 名行員的 AI 使用規範」「建立跨部門 AI 治理委員會」這類組織建設,是確定要全面部署後才做的事。在 PoC 還沒結論前就花時間做這個,是資源的錯置。

舊方法

把 PoC 工作和部署後工作混在一起,會怎樣?

  1. 資源浪費:PoC 結果可能是「這個方向不可行,要換另一個技術路線」,這時候已經花時間做的治理框架就全部作廢
  2. 優先順序錯誤:PoC 團隊時間有限,把精力花在治理框架,反而影響驗證品質的工作深度
  3. 組織混亂:規範尚未定案就開始制定,後來驗證結果改變了系統設計,規範又要大改
  4. 時序問題:「治理框架」是基於「系統長什麼樣子」而設計的,但 PoC 還沒決定最終系統的樣子,框架就沒有依據
  5. 核心原則:PoC 的目的是「用最小成本確認可行性」,不是「用 PoC 完成所有工作」

新方法

PoC 階段應該做哪些事

PoC 階段的工作圍繞一個核心問題:「在這個場景,這個技術方案可不可行?」

要回答這個問題,需要做的是:

驗證模型回覆品質:用真實問題測試,確認回覆準確性、適切性、穩定性(同一問題問三次,答案是否一致)。這是 A 選項做的事。

測試業務需求匹配度:確認 AI 能處理的問題類型和業務實際遇到的問題有沒有落差。這是 B 選項做的事。

評估技術可行性:確認能不能跟現有系統串接、有沒有技術限制(如資料格式、延遲要求)。這是 D 選項做的事。

C 選項的「制定跨部門使用規範與長期治理框架」,需要已知系統最終形態、已確認要全面部署,才能有依據地設計。PoC 還沒這些前提,做這個工作是「超前」的。

這就是選項 C 最不適合在 PoC 階段做:制定跨部門使用規範,與長期治理框架。

錯選項

為什麼其他選項是錯的

A驗證模型在實際使用情境下的回覆品質與穩定性

字面在說什麼

用真實業務情境測試 AI 回覆,確認品質夠不夠好、是否穩定。

為什麼不對

這是 PoC 的核心工作之一。PoC 就是要在真實情境下測試,「回覆品質是否符合業務要求」是決定 Go/No-Go 最重要的判斷依據。A 完全適合在 PoC 階段做,不能選。

誰會選錯

不了解 PoC 定義的人,以為 PoC 只是「技術測試」不包含業務品質驗證。事實上品質驗證是 PoC 最重要的部分。

B測試 AI 功能與業務需求的匹配程度

字面在說什麼

確認 AI 的能力和真實業務需要的功能有沒有對上。

為什麼不對

這也是 PoC 的核心工作。如果 AI 能力和業務需求不匹配,那就沒有繼續的意義。B 是決定「值不值得繼續投資」的關鍵評估,完全適合 PoC 階段,不能選。

誰會選錯

把 PoC 理解成純技術測試、忽略業務面評估的人。PoC 需要同時評估技術可行性和業務價值。

D評估系統整合可行性與技術限制

字面在說什麼

確認 AI 系統能不能跟現有 IT 系統串接,以及有沒有技術上的限制和障礙。

為什麼不對

這是 PoC 必做的技術評估。如果系統整合根本做不到(如 API 格式不相容、安全規範衝突),就算 AI 能力再好也沒有辦法落地。評估技術可行性是 PoC 的重要任務,不能選。

誰會選錯

以為「技術整合評估是部署後才做」的人。技術可行性評估越早做越好,是 PoC 就該確認的事,否則到全面部署時才發現技術障礙,代價更高。

變形題

同個考點下次怎麼變形

延伸

想再往下看,這 5 個

答案、題目或解析有問題?回報這題

出處:iPAS 經濟部產業人才能力鑑定 ・ 115 年第一次 iPAS AI 應用規劃師 初級 科目二 生成式 AI 應用與規劃 第 38 題

看官方原文 PDF

原題 © 經濟部產業發展署,AITerms.tw 僅作教學解析使用,本站解析以 CC BY-NC-SA 4.0 授權。