2) ERP 匯出資料中台

輕量 Data Warehouse|匯出資料的中台化

核心設計

  • 待齊檔批次機制,檔案完整才啟動 pipeline。
  • 正規化 + 驗證 + 去重,搭配錯誤碼目錄管理資料品質。
  • 修正器流程:未匹配清單 → 指派/合併/忽略 → mapping 永久化。
  • 模糊匹配:分段相似度門檻,提供建議清單。

輕量 Data Warehouse 架構

  • staging/raw → canonical → mapping/關聯視圖 → 事實/指標彙總層。
  • 批次 ID 追蹤版本與回放,支援重算與差異追蹤。
  • 彙總結果可刷新(物化視圖或彙總表)。
  • Prometheus + OpenTelemetry + 結構化 log 串接可觀測流程。
10k–100k 筆資料規模
< 3s 儀表板載入
< 5m 匯入重算
72 測試案例

專案概述

將 ERP 匯出資料整合為輕量級資料倉儲,提供統一的資料存取層與分析能力。

技術亮點