阿摩線上測驗
登入
阿摩線上測驗
登入
學習重點 分辨直接評量與間接評量：直接評量要求學生實際展現目標能力，例如寫作文；間接評量透過相關知識或技能推估能力，例如以選擇題測文法與修辭。 掌握信度看一致與穩定，效度看測量與解釋是否切合目的。客觀計分不等於高效度。 比較作文與選擇題的優缺點時，能從評分者主觀、猜測、任務取樣、能力代表性及真實性提出理由。 真實評量須把生活情境、活動流程、評分規準連結起來，蒐集學生在真實脈絡中應用知識解決問題的證據。 核心觀念 一、直接與間接評量：看學生實際做什麼 直接評量要求學生直接表現欲測量的能力。若要了解寫作能力，就請學生完成作文，觀察其立意、組織、用字遣詞及表達。間接評量則測量與目標能力有關的成分，再據此推估整體能力，例如以選擇題要求選出正確文法、較佳修辭，或挑出錯誤用法。 判斷關鍵是作答行為與評量目標的關係。選出較佳的文章結構，主要展現辨識與判斷。自行組織並寫出文章，才直接提供完整寫作表現的證據。不能因試題內容談論寫作，就認定是在直接評量寫作能力。 二、信度：結果是否穩定、評分是否一致 信度關注測量結果的一致性與穩定性。比較兩種寫作評量時，應說明哪些因素會增加或減少測量誤差。 比較面向直接評量：作文間接評量：選擇題 評分一致性評分者對立意、文采或結構的判斷可能不同，寬嚴標準也可能有差異。因此容易受評分者主觀影響，信度相對較低。有標準答案，計分客觀，不受評分者差異影響。因此信度通常比直接評量高。 取樣範圍有限時間內通常只能完成一、兩篇作品，成績可能受考生對特定題材熟悉程度的影響。能安排較多試題，涵蓋較廣的知識與技能，可降低少數題目造成的偶然影響。 其他誤差考生的臨場狀態、題材經驗，以及評分者標準不一致，都可能影響結果。考生可能猜對答案，使分數混入能力以外的偶然因素，造成信度下降。 改善方式建立明確且一致的評分規準，使用示例作品，進行評分者訓練與校準。必要時可由多位評分者評分，或增加任務數量。改善題目品質，合理設計誘答選項，並使試題數量與內容取樣適切。 「題目難度不一致」不是作文信度低的理由。比較兩種方式的信度時，關鍵在評分者主觀與猜測這兩類誤差，不在題目有難有易。以難度不一致解釋信度偏低，是錯誤推論。 選擇題常把直接評量的信度說成「容易受評分者主觀影響，因此較無信度」。這是在與間接評量相比，屬於正確的相對判斷。申論作答時，宜補充可用一致的評分規準與評分者訓練來提升信度，答案會更完整。 三、效度：是否足以支持對寫作能力的判斷 效度關注測驗分數的解釋與用途是否適切。若目標是了解完整寫作能力，直接評量要求考生實際寫作，可以看出學生如何構思、統整材料、安排篇章及表達觀點。因此直接評量能更精準地測出寫作能力，效度比間接評量高。它也具有評量思考、統整、問題解決與表達等高層次能力的優點，而且內容效度、構念代表性與真實性都較佳。 直接評量的效度限制是取樣不足。作文題目只有一、兩篇，可能無法涵蓋各種文體與題材。若評分偏重字跡或篇幅等無關因素，也會削弱效度。 間接評量能有效率地涵蓋文法、修辭及用法等內容。它的試題最具結構性，施測與計分省時省力，結果客觀。但會辨認正確語句，不代表能自行寫出完整文章。以選擇題間接推論寫作能力，容易遺漏構思、篇章組織與持續表達等重要成分，與真實寫作的距離也較遠，因此效度較低。 信度高不保證效度高。選擇題計分即使非常一致，若只測到寫作的局部成分，仍不足以支持對整體寫作能力的推論。 四、申論作答架構：直接與間接寫作評量的信效度 信度： 間接評量有標準答案，計分客觀，評分一致性高，題數多也使取樣較廣，因此信度較高。缺點是會受猜測影響。 直接評量易受評分者主觀與寬嚴差異影響，篇數少也使取樣有限，因此信度較低。可藉由一致的評分規準、評分者訓練與多人評閱來改善。 效度： 直接評量讓考生實際寫作，能測出構思、統整、組織與表達等高層次能力，內容效度、構念代表性與真實性都高，因此效度較高。 間接評量只測文法、修辭等片段知識，且屬於辨識而非產出，難以代表完整寫作能力，因此效度較低。優點是省時省力，能廣泛取樣這些基礎知能。 結論：兩種方式各有所長，可以併用互補，例如大型考試同時考選擇題與作文。 五、真實評量：在有目的的情境中應用所學 真實評量讓學生在貼近生活、具有意義的脈絡中，整合知識與技能來完成任務。評量不只看最後答案，也看學生如何理解條件、選擇方法、執行計算、檢查結果並說明理由。情境可以來自真實生活，也可以是合理的模擬情境。 真實評量與直接評量常有重疊，但著重點不同。直接評量重在直接展現目標能力；真實評量進一步重視情境、任務目的與應用。單純要求學生完成計算題，雖能直接觀察計算表現，仍未必能呈現生活中的計算應用。 六、數學真實任務設計示例：班級活動採買 情境：配合已教過的整數四則運算，設定班級要為二十人準備點心，每人一份飲料與一份麵包，總預算一千元。教師提供模擬商品價目表，讓學生在數量與預算的限制下提出可行方案。這個情境任務目的明確，能自然引出數量、單價、總價與餘額的計算。 活動流程： 理解任務：閱讀人數、需求、預算及價目表，列出已知條件與待解問題。 規劃方案：選擇商品並製作採買表，記錄品名、單價、數量及預定算法。 執行計算：算出各項小計、總支出與剩餘金額，並保留算式及計算歷程。 檢核修正：用估算或重新計算確認結果，檢查是否滿足人數與預算限制。若超支，就調整商品後再計算。 說明與反思：提出採買建議，說明選擇理由及檢查方法。教師透過作品、觀察與口頭追問蒐集證據。 計算示例：飲料每份二十元、麵包每份二十五元，各買二十份，總支出為九百元，餘額一百元。這只是教師檢核計算的參考，學生提出其他符合限制、理由合理的方案也可接受。若採小組活動，仍應蒐集每位學生的計算紀錄或口頭說明，才能判斷個別學生的能力。 評分標準：應在活動前向學生說明，並對應計算應用能力。檢核表適合確認必要條件是否達成，評分量表則適合區分表現的品質與程度。 工具可觀察的評分內容 檢核表是否滿足二十人的需求、是否列出算式、是否未超出預算、是否完成結果檢查。 分析式評分量表分別評定條件理解、策略適切性、計算正確性，以及說明與檢核的品質，各向度分等級並附具體描述。 量表描述要具體。例如「能選用適當運算、正確求得總額與餘額，並說明結果符合限制」，比「表現優良」更能支持一致的評分。申論作答時，應讓情境、流程與規準前後對應。活動流程配分最高，應分步驟充分展開。 常考陷阱 「間接評量……具有省時省力、測驗結果相對主觀的優點」：錯在主客觀顛倒。選擇題有標準答案，結果客觀。只要看到「選擇題主觀」就是錯誤敘述。 「直接評量的題目難度不一致，容易造成信度低」：錯誤。直接評量信度較低的理由是評分者主觀，不是題目難度不一致。 「直接評量容易受評分者主觀影響，因此較無信度」：屬於正確的相對判斷，不要誤選為錯誤選項。 「間接評量有標準答案，信度比直接評量高」、「間接評量易受猜測影響而降低信度」：兩者都是正確敘述。 「直接評量能更精準測出寫作能力，效度比間接評量高」、「直接評量能評量思考、統整、問題解決與表達等高層次能力」：都是正確敘述。 「選擇題信度較高，因此更能測出完整寫作能力」：混淆信度與效度。評分一致不等於能力取樣完整。 「題目加上購物故事就是真實評量」：學生必須實際運用條件來做決策、計算及檢核，不能只有生活化的包裝。 「真實評量只看成果是否漂亮或活動是否熱鬧」：評分應對準學習目標，保留可判讀的計算與應用證據。 記憶口訣 「直接寫作效度高、主觀信度低；間接選擇信度高、猜測效度低。」直接評量的效度優勢來自真實與高層次能力，信度弱點在評分者主觀。間接評量的信度優勢來自客觀計分，弱點是猜測與片段測量。 「信度怪主觀與猜測，不怪難度。」遇到「難度不一致所以信度低」，直接判錯。 「真實三連：情境有目的、流程見應用、規準有證據。」設計題依此展開，讓任務與評分前後呼應。