PDF Question Quality Evaluation

上傳 PDF 和 questions CSV,後端會做 retrieval evaluation,並用 LLM 判斷 chunk 是否足夠回答問題。

CSV 規則:第 0 欄是 question,第 1 欄是 answer(可空白、可沒有),不需要 id。
1 = 只看 best chunk。
3 = 把 top3 chunks 一起丟給 LLM 判斷。

CSV 範例

只有問題:

我們公司要幾個人以上才需要訂工作規則啊?
工作規則要報哪個單位核備?
如果我懷孕在休產假,公司能不能解雇我?

問題 + 答案:

我們公司要幾個人以上才需要訂工作規則啊?,僱用滿30人以上。
工作規則要報哪個單位核備?,地方勞工行政主管機關。
如果我懷孕在休產假,公司能不能解雇我?,不可以。

執行狀態

尚未開始

Summary

尚無結果

Results

尚無結果

Answers

尚無結果