iPAS AI 應用規劃師初級 114 年第四次 科二 第 45 題 詳解

114 年第四次 科二 生成式 AI 應用與規劃 · 考點:生成式AI導入規劃

下列哪一個資料集專門設計用於測試大型語言模型在多領域、多任務語言理解中,涵蓋人文、科學與社會科學等領域,而非專門用於數學推理或中文專業知識?

  1. AMMLU(正確答案)

    MMLU 橫跨 57 學科,正是多領域多任務語言理解評測。

  2. BGSM8K

    GSM8K 是小學程度數學應用題,只測算術推理。

  3. CMATH

    MATH 收錄競賽級數學題,專攻數學解題能力。

  4. DC-Eval

    C-Eval 針對中文情境的學科知識評測,領域定位不同。

正確答案:A

大型語言模型常見評測基準資料集的用途差異 看題目強調的評測面向是「多領域通識」「數學推理」還是「中文學科」,再對應基準名稱。

用刷8題準備 iPAS AI 應用規劃師初級

每天隨手刷 8 題,答錯的題目會自動排回來再考一次。不用註冊,打開就能開始。

開始刷題

生成式AI導入規劃

  1. 114 年第四次 科二 第 47 題某顧問公司導入生成式AI,協助團隊快速檢索並摘要長篇的法規文件。為了改善檢索結果常出現不相關或過於分散內容的問題,下列何…
  2. 115 年第三次 科二 第 7 題某物流公司開發一套「訂單異常即時處理系統」,採用提示鏈(Prompt Chaining)技術,依序完成訂單解析、異常分類…
  3. 115 年第三次 科二 第 13 題某溫室農場已收集大量害蟲影像資料,並建立害蟲種類及對應防治方法的知識庫。農場希望建置一套AI系統,除了能辨識害蟲種類,還…
  4. 115 年第三次 科二 第 16 題某金融機構欲建立內部法規問答系統,供員工查詢最新的洗錢防制與客戶盡職調查規範。試行階段發現,大型語言模型有時會生成看似合…
  5. 115 年第三次 科二 第 19 題某保險公司導入兩種大型語言模型:第一種回應速度快、成本較低;第二種推理能力較強,但運算成本較高。為了兼顧回覆品質與整體營…