RAG 實作課・68–75 分

第 8 話

最終試煉！

挑戰！

診斷挑戰：四道題，找出錯在哪一層

規則只有一條——

只准回答：
問題最可能在哪一層？

文件切找排答查

題目一

搜尋「SX-5482」，
結果前十名完全沒有產品說明書。

⏱ 思考時間：錯在哪一層？

解答一

Retrieval / Indexing

正確文件沒被找回來 → 檢查索引與搜尋

文件切找排答查

題目二

產品說明書已經在第一名，
但 AI 說保固三年。文件明明寫兩年。

⏱ 思考時間：錯在哪一層？

解答二

Generation / Faithfulness

證據排第一，答案卻跟證據不一樣

文件切找排答查

題目三

2026 新版辦法已經上傳，
但每次都找到 2025 舊版。

⏱ 思考時間：錯在哪一層？

解答三

Metadata / Versioning / Ranking

分不出新舊版本，新版也排不上來

文件切找排答查

題目四

上一輪對話談的是 SX-5482。
使用者問：「那它保固多久？」
搜尋結果卻完全不知道「它」是誰。

⏱ 思考時間：錯在哪一層？

解答四

Query Understanding
/ Query Rewrite

問題裡的「它」，沒被還原成 SX-5482

文件切找排答查

文件→ 切→ 找→ 排→ 答→ 查

把黑板上的六個字，
叫回來！

所以 RAG 出錯時，
第一個問題應該是什麼？

不是：「要不要換 GPT？」

而是——

錯在哪一步？

75 分鐘標準版——

完

90 分鐘加映篇：
Query Rewrite ／ Metadata ／ 小組 A/B Test ／ 最終回

下回預告加映①：「它」是誰？Query Rewrite！

加映