命题策略与技术

《命题策略与技术》由会员分享，可在线阅读，更多相关《命题策略与技术（40页珍藏版）》请在装配图网上搜索。

1、命題策略與技術講授大綱國立彰化師範大學國立彰化師範大學生物學系生物學系黃世傑教授黃世傑教授1一、班級測驗之步驟目 標8.結 果 之 運 用7.試 卷 之 評 定6.試 卷 之 實 施5.試 卷 之 組 合4.準 備 適 切 之 試 題3.選擇適當之試題型式2.建 立 雙 向 細 目 表1.確 定 測 驗 的 目 的2 學習成就教材內容知識理解應用計動物64414植物64414遺傳33410生態3328演化2215計20151550二、命題綱要、兩向細目表例一：3適切性(Relevance)均衡性(Balance)特殊性(Specificity)百分比領 行域 為目標教 材甲乙丙丁計知 識智理

2、解應 用分 析育綜 合評 鑑情意技能 計例二：4雙向分析表例三：認知層次命題資料來源(請打)備註 章 單 節 元 名 稱 題 號大 題知識理解應用批判性思考自行命題採用題庫 配 分5三、評量方案(1)1.測驗(testing)(1)紙筆測驗(paper-pencil test)選擇題、是非題、申論題 (2)圖畫式測驗(pictorial test)幻燈片等 (3)實作測驗(lab,performance test)(4)open book test (5)take home test 2.觀察法(observations)檢核表(checklist)6三、評量方案(2)4.作品分析(produ

3、ct analysis)(1)設計(projects)(2)報告(reports)5.自我/同儕評量法(self/peer evaluation)討論(conference)3.評定量法(inventories)(1)問卷(questionnaire)(2)量值法(rating scale)7四、紙筆測驗型式1、標準化測驗(standardized test)非標準化測驗(nonstandardizedtest)Teacher-made test Custom-made test2、主觀，客觀；供應，選擇申論題問答題簡答題名詞解釋填充題是非題選擇題配合題主觀型式測驗Subjective tes

4、t客觀型式測驗Objective test供應型Supply type選擇型Selection type8五、一般命題原則1.取材，均勻分布2.試題須彼此獨立3.試題應有正確答案4.試題不可含有暗示答案之線索5.避免直抄課文，文句須重新組織6.宜注重基本原理之瞭解與活用，非 零碎知識之記憶9六、良好測驗的品質1.適切性(relevance)2.平衡性(balance)3.有效性(efficiency)4.客觀性(objectivity)5.特殊性(specificity)6.適當的難度(difficulty)7.良好的鑑別度(discrimination)8.信度(reliability)9.

5、效度(validity)10.公平性(fairness)11.速度性(speededness)一個良好的測驗應具備下述十一項品質10七、成就測驗題類型甲、供應型(supply-type)-由學生供應答案1.論文型-擴展性反應(extended response)2.論文型-限制式反應(restricted response)3.簡答題4.填充題乙、選擇型(selection-type)-學生選擇答案1.是非題2.配合題3.選擇題11八、是非題命題要領即原則1.避免可洩漏答案線索的強調意味的詞句，如完全、常常、決無、有時、可能等。2.對錯題的排列和數目，避免有一定的規律。3.不要直接抄自課文。4

6、.盡量使用含義明確的字詞，並力求簡短。5.題意和詞句必須全對或全錯，避免半對半錯。126.試題中僅可能使用具體而確實的數量，避免空泛概念。7.避免雙重否定。8.錯誤的敘述應代表一種不正確的基本概念或指明出處。9.凡有爭論的問題，應冠作者姓名或指明出處。10.對錯兩種試題的題數約略相等。11.避免零碎不重要或純記憶性的命題。12.除非因果關係，避免包括兩個概念。13九、選擇題命題要領及原則1.每題所列的選目應該一致，以四或五個為宜。2.每題的選目以簡短為宜，必要的敘述或相同的字詞宜置於題幹中。3.選目之“答案”在形式或內容性質上不可特別突出。4.誘答與題幹間應有相當的邏輯性和似真性。5.少用“以

7、上皆非”，避免使用“以上皆是”的答案。題幹(Stem)選擇題 選目 答案(Answer)(Options)誘答(Distracters)146.選目之間應避免重疊現象，且宜按選目的邏輯順序排列之。7.題幹須求完整，且其敘述應能顯示題意。8.正確答案出現的位置應隨機排列，且其次數要大致相等，以避免猜測因素之影響。9.題幹句子應長些，而選目則儘量短些。10.除非重要概念，少使用雙重否定，如必須使用，應加底線。11.選目在文法、語氣和句子長短，應保持一致。15十、配合題命題要領及原則 前題(Premises)配合題 反應項目(Responses)1.前題及反應項目在性質上應力求相近，且按邏輯次序排列

8、。2.前提與反應項目數量不宜相等。3.配對項目不可過多或過少，以十項左右為宜。4.作答的方法必須與以明確的規定和說明。5.同一組項目宜印在同一頁上，以免造成做答時的困擾。6.原則上，前題與反映項目配合的可能性，最好以一個為限。7.前題的句子通常應比反應項目長，而且將選目(反應項目)置於右方。16十一、填充式命題要領及原則1.避免直抄課文，應偏重對知識的理解與應用。2.題目應明確指示哪一方面的答案。3.重要的字，重要的概念，才值得命題。4.一題一空格為原則，且最好放在一句後面。5.填答字數愈少愈佳。6.空格長短應一致。7.避免各種暗示正確答案的線索。8.準備一份各種可予計分的標準答案。17十二、

9、論文式命題要領及原則:1.把學科或學科單元的教學目標和教材內容列出，出量其重要性，分配試題。2.試題的敘述要明確和具體，避免含糊模稜的詞句。3.考試內容應相一致，避免選題作答方式。4.讓同事批評所擬具的試題草稿。5.預期答案能明確界定。6.明確指出應回答的範圍。7.註明回答所需的時間和分數。8.先自行認做標準答案18十三、校正機遇公式(N-1)score 分數right 作對題數wrong 做錯題數number 提供選擇之答案數，是非為 2二選一猜錯數猜對數：119扣分方法SRW(N1)(單選題)SRW(n)(多選題)S真正做對題數N供選擇之答案數n以四個候選答案為例有16種例一四選項以四種候

10、選答案為例有 16 種(即 24 種)選出可能選 0 個者 1 種可能選 1 個者 4 種可能選 2 個者 6 種可能選 3 個者 4 種可能選 4 個者 1 種可能 16猜中機會為24，每錯一題應扣去 1(24-1)分猜錯題數猜對題數151S15 (16-1)(24-1)20例二五選項以四種候選答案為例有 32 種(即 25 種)選出可能選 0 個者 1 種可能選 1 個者 5 種可能選 2 個者 10 種可能選 3 個者 10 種可能選 4 個者 5 種可能選 5 個者 1 種可能 32猜錯題數猜對題數311S31 (32-1)(25-1)猜中機會為25，每錯一題應扣去 1(25-1)分2

11、1例三六選項以四種候選答案為例有 64 種(即 26 種)選出可能選 0 個者 1 種可能選 1 個者 6 種可能選 2 個者 15 種可能選 3 個者 20 種可能選 4 個者 15 種可能選 5 個者 6 種可能選 6 個者 1 種可能 32猜錯題數猜對題數311S31 (32-1)(25-1)猜中機會為25，每錯一題應扣去 1(25-1)分22十四、試題分析1.難度指數 (1)P=N R：答”對”總數 N：學生數試題難度與P值關係P=0.851.00 P=0.600.85 P=0.350.60 P=0.000.35(P值愈大，則試題愈容易)R232.區別度指數(discriminitio

12、n)D=RHRLN/2例：何種動物之神經系統最簡單？(A)蛇(B)鳥(C)水螅(D)蛙 數數 A B C D 缺缺 P Value D Value2532011025810520 30/50=0.60 20-1050/2=0.40高高分分組組低低分分組組若D值在0.3以下，則試題無區別度若D值在0.3以上，有鑑別度24（2）P=N(RH+RL)NRH：高分組答”對”數RL：低分組答”對”數 N：學生數最高分最高分最低分最低分50/8150/81若學生數為300名，則3000.27=81(此P值越大，表示題目越困難)大樣本：自高分處與低分處各取27%，然後各任選50份如下表253.難度與區別度的

13、關係RH 0 10 20 30 40 50 50 50 50 50 50RL 0 0 0 0 0 0 10 20 30 40 50Pvalue 0 10 20 30 40 50 60 70 80 90 1.0最最大大鑑鑑別別值值 0 20 40 60 80 1.0 80 60 40 20 026十五、試卷分析效度：Validity 理性的效度(Rational Validity)Content Validity 內容效度 Construct Validity構想效度 經驗的效度(Empirical Validity)Predictive Validity 預測效度 Concurrent Val

14、idity 同時效度 內容效度：Content Validity 成就測驗(Achievement test)指測驗的內容能否達成測驗的某種能力 命題綱要(Table of specification)27同時效度 Concurrent Validity指一個測驗所得的分數，能否確實估計學生現在的作業程度指測驗分數對學生現況的評價。效度係數 Coefficient of validity係數相關00+.20 無相關+.20+.40 低相關+.40.70 相關+.70+1.00 高相關 28信度reliability1.測驗試卷的可靠性或隱定性2.一個測驗如無信度，必無效度；但有信度，未必有效度

15、3.信度係數(reliability coefficient)1.重測法(test-retest method)(1)同一測驗卷，同一群學生 (2)分別在不同時間進行，求相關係係2.等份測法(equivalent-form method)(1)兩份類似試卷：內容、性質、型式相同 (2)求此兩份試卷之相關係數3.折半法(split half method)(1)一份考卷分單數、雙數組，求相關係數 (2)同一份試卷，將學生分成單號、雙號組，求相關係數係數相關.95.99 極高，少見.90.95 高，可估算個別能力.80.90 尚可.70.80 接受：只可估算以班級為單位之學習成就.70以下 低29

16、信度與效度關係兼具信度和效度無信度亦無效度有信度但無效度30教學 目標適切教學評斷學習進展診斷學習困難學習成就量教學改進向家長報告成績等級其他用途評估學生需求十三、評量在教學上的角色31十七、評量的目的（）社會的觀點：資料收集，類型及鑑賞，培養能力教師的觀點：教學的目的達成，學習之連貫性，改進教學，診斷個別差異 32十七、評量的目的（）父母的觀點：職業的準備，生涯的訓練，生活的適應，獲得工作的機會學生的觀點：獲得知識，認識周圍環境，職業的準備，學習的進度與成就，瞭解自己的潛能與興趣 33十九、運用在教室內之評量評量類型評量類型評量方法評量方法評量技巧評量技巧題目的特徵題目的特徵配置性評量配置性

17、評量PlacementEvaluation瞭解學前能瞭解學前能，學，學習的背景習的背景、性向性向、學習的、學習的意念意念常模標準參照常模標準參照預測預測(Prognostic T.)準備準備(Readiness T.)性向性向(Aptitude T.)學前學前(Pretest T.)自陳自陳(Self-report In-ventorg)觀察觀察(ObservationalTechnique)通常題目之難通常題目之難度低度低，是效標，是效標參照的參照的題目難度之分題目難度之分散範圍較廣散範圍較廣，是，是常模參照的常模參照的診斷性評量診斷性評量DiagnosticEvaluation瞭解學習困難

18、瞭解學習困難原因原因(智力智力，體，體力力，情緒，情緒，環，環境境)探求智能態探求智能態度和技能之學習度和技能之學習狀況狀況 標準參照標準參照教師自製教師自製(Teacher-made T.)觀察觀察診斷診斷(Published DiagnistT.)通常通常，項目之，項目之難度低難度低，用來，用來指出特殊學習指出特殊學習誤之原因誤之原因形成性評量形成性評量FormativeEvaluation瞭解學習進展瞭解學習進展狀況狀況，提供增，提供增強學習之回饋強學習之回饋確認和矯正學確認和矯正學習之缺失習之缺失 標準參照標準參照教師自製教師自製觀察觀察發行試卷發行試卷(Custom-made T.)

19、題目配合單元題目配合單元目標的難度目標的難度，是效標參照的是效標參照的總結性評量總結性評量SummativeEvaluation單元完成或課單元完成或課程完成所作的程完成所作的測測，供學習成就，供學習成就及學生等級及學生等級的報告的報告 常模參照常模參照教師自製教師自製(Teacher-made survegT.)實作等級實作等級(Performance ratingSchles)作品等級作品等級(Product Scales)通常題目難度通常題目難度之分散範圍廣之分散範圍廣是常模參照的是常模參照的34二十、評量的重點（）1.學生方面：(1)智育目標：a.常模標準評量(Norm Referen

20、ced Evaluation)b.效標參加評量(Criterion Referenced Evaluation)(2)德育目標：興趣、價值 (3)技能目標：實驗、操作技能2.教師方面：(1)口述行為目標(Verbal behavior)(2)教學策略(Instructional strategies)35二十、評量的重點（）3.教室方面：(1)環境(Environment)(2)交互作用(Interaction)(3)設施(Facilities)4.課程方面：(1)邏輯結構(Logical structure)(2)智育層次(Cognitive level)(3)過程導向(Process or

21、ientation)36二十一、常態與標準參照評量比較常模參照評量Norm-referencedEvaluation標準參照評量Criterion-referencedEvaluation1.旨在確定學生在團體中相對位置2.評量定準點是中間的、事後決定的3.分數的變異性愈大愈佳4.分數解釋採常態制5.工具：標準化性向成就測驗，教師自編測驗，興趣量表評估學生是否已達熟練特定效標定準點兩端(及格、不及格)事前決定的變異性較不重視，重反應與效標間的距離採傳統百分制教師自編，精熟測驗，觀察實作技術等37二十二、紙筆測驗無法測量的學習成果學習結果代表性的行為技能說話、寫作、聽力、朗讀、實驗、繪畫、樂器演奏、舞蹈、體育、工作技能、研究技能、社交技能工作習慣進行計劃、時間運用、裝備使用、資源使用、顯示主動性、創造性、持久性、及可靠性等性質社會態度關心別人福利、尊重法律、尊重他人財產，對社會問題之敏感度，關心社會的設施和制度科學態度虛心的，容忍懸疑，對因果關係的敏感性，追根究底的態度興趣對各種教育的、機械的，藝術的、科學的、社會的、休閒的，及職業的活動之感受鑑賞對大自然的、音樂的、藝術的、文學的、身體技巧及特殊社會貢獻等的滿足感適應與同伴的關係，對讚美與批評的反應，對權威的反應，情緒的穩定性，社會的適應性38謝謝收看39