Codoria 學習證據方法
「我以為我會」和實際作答,差了多少?
Codoria 以作答證據判斷掌握程度;閱讀、停留或完成任務的次數只代表接觸紀錄。 你作答時,Codoria 會分開保存把握度、答案、提示與評分條件。證據足夠後,系統才會描述自評與結果的落差;你可以從每個結論回看支撐它的作答。
方法版本 v2 · 最後實質審閱:
確認各類訊號的證明範圍
哪些學習行為能支持掌握判斷?
Codoria 只把有效、具客觀對錯、獨立評分、零平台提示,且學習者聲明未使用外援的作答計入已驗證掌握度。閱讀、收藏、 有提示的練習與作答前自評會進入其他投影。四種訊號各有證明範圍;下表列出 Codoria 可以從每種訊號得出哪些結論。
| 訊號 | 可以支持 | 不能直接宣稱 |
|---|---|---|
| 閱讀、收藏、停留或一般對話 | 可以記錄你接觸過的內容和當時處理的問題類型。 | 這類紀錄只能證明接觸,無法證明你已理解、能回想或能在新情境使用。 |
| 有提示的練習與 Tutor 教學 | 可以幫助 Codoria 判斷下一步要補概念、換解釋或繼續練習。 | 這類結果不足以證明你能在無提示下完成;Codoria 會另行驗證。 |
| 作答前自評把握度 | Codoria 可以把自評和之後的客觀結果配對,觀察自我判斷的校準情況。 | Codoria 把自評當作待比對的預測,不用它更新已驗證掌握度。 |
| 有效、具客觀對錯、獨立評分、零平台提示,且學習者聲明未使用外援的作答 | 題目、評分與作答條件通過檢查後,Codoria 會把結果列為較強的獨立證據。 | 未使用外援的聲明屬於自陳;評量未監考,也不驗證身分或排除外部工具。單次結果不足以支持固定趨勢,也不構成正式能力認證。 |
三種校準對象
Codoria 怎麼量出「我以為我會」和實際作答的落差?
Codoria 在你作答前先記錄你自己選的把握度,再把它和之後客觀評分的結果配對, 並根據一段時間的紀錄描述兩者關係。一、兩題不足以支持「太有自信」的結論。Codoria 追蹤三種「宣稱和事實之間的差」:學習者的自評落差、平台投影的高估,以及判斷方法的可靠度。
落差一 / 學習者
我以為我會,實際上呢?
把作答前的把握度和之後的客觀結果配對。Codoria 需要一段時間的紀錄,才會描述自評與結果的關係;一、兩題不足以支持「太有自信」或「不擅長」某個概念的結論。
目前狀態:已上線;證據不足時顯示「資料還不夠」,不顯示 0%。
落差二 / 平台
平台的預測平均高估了多少?
在每次獨立作答前,記錄練習線預測答對的機率,再和實際結果比較。Codoria 會使用多筆作答的平均落差與不確定區間,判斷平台是否偏向高估。
目前狀態:已上線;樣本不足時顯示「資料還不夠」,不判斷平台高估。
落差三 / 判斷方法
判斷方法有多可靠?
把系統對外表達的信心和後續實際命中率比較。Codoria 只會在案例數、結案狀態與不確定區間都達到門檻時,用經驗結果取代保守先驗。
目前狀態:Codoria 仍需累積資料;未達門檻前不公布命中率。
從一次作答開始
一次作答要記錄哪些條件,結果才能進報告?
Codoria 在一次作答裡分開保存作答前的把握度、題目與版本、客觀對錯、提示使用、 學習者的外援聲明,以及評分來源與作答有效性。Codoria 只把所有條件都通過檢查的結果放進較嚴格的獨立證據投影。 系統會保留條件不齊的紀錄,並把它排除在已驗證掌握度之外。
01 / 作答前
Codoria 先記錄學習者自己選擇的把握度,再揭示答案。
02 / 作答時
保存題目與版本、客觀對錯、提示使用、學習者的外援聲明、作答條件與評分來源,避免把不同條件混算。
03 / 驗證時
Codoria 只把有效、具客觀對錯、獨立評分、零平台提示,且學習者聲明未使用外援的結果納入較嚴格的獨立證據投影。
04 / 呈現時
Codoria 逐筆保留可回溯紀錄,並標示樣本不足、判斷被推翻或平台高估的情況。
資料流程示意
一次高把握度答錯只會形成一筆落差紀錄
這個例子說明資料流程。實際使用者結果與 Codoria 的產品成效需要另外驗證。
1. 學習者在作答前選擇「很確定」,結果答錯。
Codoria 保存這筆落差,等累積更多作答後才描述一段時間的關係。
2. 系統留下「換題型或延後複測」的可稽核建議。
這項建議會改用其他題型檢查學習者能否產生答案,避免辨認題只測到熟悉感。目前系統只記錄建議,並未保證下一次評量會自動切換形式。
3. 累積足夠有效結果後,才描述一段時間內的自評與作答關係。
報告只描述紀錄,不替學習者貼人格標籤;新證據可以推翻舊判斷。
目前不能說的事
Codoria 的學習報告不能用來做什麼?
Codoria 的學習報告只描述已保存的紀錄。它不能當作能力認證,也不能取代醫療、心理或職業評估。 沒有合格題目時,Codoria 會把狀態留作未驗證,不用 Tutor 自評或 AI 猜測補值。Codoria 也不承諾成績或學習成果。
- Codoria 正分階段提供獨立評量題目;沒有合格題目時,系統會把狀態留作未驗證。
- Codoria 仍在累積已驗證掌握度的預測力資料,目前尚未達到對外公布成效的門檻。
- Codoria 無法從未監考作答驗證作者身分或排除外援;系統會分開保存評分有效性、協助聲明與作答條件。
- 請勿把學習報告用作醫療、心理、職業或正式能力認證。Codoria 不承諾成績或學習成果。
證據屬於學習者
回看、匯出、更正與刪除自己的學習資料
你可以從每項學習狀態回看支撐紀錄,也可以查看資料控制範圍、匯出自己的學習資料, 並在產品提供的範圍內以追加紀錄更正或刪除。資料不足的項目會標為「尚未評估」。
自創詞的標準說法
Learning Space、今日計畫、已驗證掌握度分別是什麼?
Learning Space 是 Codoria 裡一個學習目標的工作區,今日計畫是 Codoria 每天重算的行動投影。已驗證掌握度只由有效、具客觀對錯、獨立評分、零平台提示,且學習者聲明未使用外援的作答更新。 這些詞沿用上方證據層級表與三張落差卡的定義。
- Learning Space
- Codoria 裡一個學習目標的工作區:目標、匯入的材料與一位主要 Tutor 綁在一起,學習證據也記在這個範圍內。
- Learning OS
- Codoria 對自己的定位:一個記得你學過什麼、追蹤掌握程度並指出盲點的個人系統;你仍要完成學習與作答。
- Learning Director
- Codoria 的排程層:依 Learning Space 的目標與既有學習證據排出今天的任務,並說明每項任務為何出現。
- 今日計畫
- Codoria 每天重算的一份行動投影,不是學習證據。Codoria 依當天的作答紀錄推導完成度,不提供自行「標記完成」。
- 已驗證掌握度
- Codoria 只用「有效、具客觀對錯、獨立評分、零平台提示,且學習者聲明未使用外援的作答」更新這項掌握度投影,不採用閱讀、收藏、停留或一般對話。
- 落差一 / 學習者
- Codoria 追蹤的三個落差之一,問「我以為我會,實際上呢?」,做法是把作答前的把握度和之後的客觀結果配對。
- 落差二 / 平台
- Codoria 追蹤的三個落差之一,問「平台的預測平均高估了多少?」,做法是在每次獨立作答前,記錄練習線預測答對的機率,再和實際結果比較。
- 落差三 / 判斷方法
- Codoria 追蹤的三個落差之一,問「判斷方法有多可靠?」,做法是把系統對外表達的信心和後續實際命中率比較。