設(shè)計(jì)并進(jìn)行形成性評(píng)價(jià)

設(shè)計(jì)并進(jìn)行形成性評(píng)價(jià)第一頁，共二十五頁，編輯于2023年，星期一迪克和凱里模型評(píng)價(jià)需求

確定目的進(jìn)行教學(xué)分析分析學(xué)習(xí)者和環(huán)境編寫績效目標(biāo)修改教學(xué)開發(fā)評(píng)價(jià)方案開發(fā)教學(xué)策略設(shè)計(jì)并實(shí)施教學(xué)的形成性評(píng)價(jià)設(shè)計(jì)并實(shí)施總結(jié)性評(píng)價(jià)開發(fā)和篩選教學(xué)材料第二頁，共二十五頁，編輯于2023年，星期一背景30年前情況：直接將最初版本轉(zhuǎn)化為成品，并直接應(yīng)用于目標(biāo)人群。后果：由于初稿的不完善，教師教學(xué)和學(xué)生學(xué)習(xí)都出現(xiàn)了很多問題。當(dāng)時(shí)的“評(píng)價(jià)”概念：將新設(shè)計(jì)的材料與已有成品比較其有效性。在這種比較下，研究者經(jīng)常發(fā)現(xiàn)使用新課程材料的學(xué)生學(xué)習(xí)效果較差。CronbachandScriven提出形成性評(píng)價(jià)的概念：

在教學(xué)開發(fā)過程中從目標(biāo)人群中搜集關(guān)于教學(xué)材料使用及效果的數(shù)據(jù)和信息，用以提高教學(xué)效果。第三頁，共二十五頁，編輯于2023年，星期一形成性評(píng)價(jià)的概念形成性評(píng)價(jià)：教學(xué)設(shè)計(jì)者搜集數(shù)據(jù)信息以改進(jìn)教學(xué)，提高教學(xué)效率效果的的過程形成性評(píng)價(jià)的重點(diǎn)：搜集數(shù)據(jù)，分析數(shù)據(jù)，改進(jìn)教學(xué)形成性評(píng)價(jià)的三個(gè)基本階段：1一對(duì)一評(píng)價(jià)2小組評(píng)價(jià)3場景評(píng)價(jià)

第四頁，共二十五頁，編輯于2023年，星期一形成性評(píng)價(jià)可用專家

在這三個(gè)階段之前，征求不直接參與教學(xué)開發(fā)過程但有興趣的相關(guān)專家的意見：領(lǐng)域?qū)＜遥⊿ME）：主要評(píng)價(jià)教學(xué)內(nèi)容的精確性和時(shí)新性特定類型學(xué)習(xí)方面的專家：可以就提高該類型學(xué)習(xí)效果方面對(duì)教學(xué)策略提出建議。學(xué)習(xí)者專家：可以從目標(biāo)人群的視角和反應(yīng)看教學(xué)，從最終的應(yīng)用環(huán)境來看材料是否合適。第五頁，共二十五頁，編輯于2023年，星期一一對(duì)一評(píng)價(jià)

目的：確定并消除教學(xué)中存在的最明顯的不足之處，了解學(xué)習(xí)者對(duì)學(xué)習(xí)材料的最初反應(yīng)和表現(xiàn)特點(diǎn)。選擇學(xué)習(xí)者：學(xué)習(xí)者是目標(biāo)人群中的3個(gè)左右的典型代表。根據(jù)與學(xué)習(xí)成就高度相關(guān)的影響因素來選擇。知識(shí)準(zhǔn)備：高于平均水平；處于中等；低于平均水平學(xué)習(xí)態(tài)度：積極態(tài)度的；一般態(tài)度的；消極態(tài)度的經(jīng)歷：有10年以上工作經(jīng)驗(yàn)的；有2到5年工作經(jīng)驗(yàn)的；工作經(jīng)驗(yàn)不到一年的第六頁，共二十五頁，編輯于2023年，星期一一對(duì)一評(píng)價(jià)過程：設(shè)計(jì)者向?qū)W習(xí)者進(jìn)行必要說明，學(xué)習(xí)者使用材料，學(xué)習(xí)者和設(shè)計(jì)者交流特點(diǎn)：設(shè)計(jì)者要與學(xué)習(xí)者建立友好信任關(guān)系進(jìn)行有效互動(dòng)數(shù)據(jù)信息來源：學(xué)習(xí)者標(biāo)注，測試成績，態(tài)度問卷，評(píng)價(jià)者記錄

一對(duì)一評(píng)價(jià)的標(biāo)準(zhǔn)：

1

清晰度：對(duì)于學(xué)習(xí)者個(gè)體而言，信息或者呈現(xiàn)給他們的教學(xué)內(nèi)容是否明了、清楚？

2影響力：教學(xué)對(duì)于學(xué)習(xí)者個(gè)體的態(tài)度和達(dá)到教學(xué)目標(biāo)有沒有影響？

3可行性：如果得到所需的資源（如時(shí)間、教學(xué)情境），教學(xué)的可行性多大？第七頁，共二十五頁，編輯于2023年，星期一一對(duì)一評(píng)價(jià)信息搜集標(biāo)準(zhǔn)教學(xué)內(nèi)容相關(guān)內(nèi)容教學(xué)過程清晰度（合適）詞語表達(dá)句型導(dǎo)入具體闡述結(jié)論過渡背景實(shí)例類比圖解示范回顧總結(jié)順序安排教學(xué)塊大小教學(xué)塊過渡節(jié)奏快慢變化態(tài)度成績對(duì)學(xué)習(xí)者的影響力是否有用(relevance)難度如何(confidence）學(xué)習(xí)后滿意程度學(xué)習(xí)者在各個(gè)教學(xué)目標(biāo)的學(xué)習(xí)成果對(duì)學(xué)習(xí)者資源可行性成熟度獨(dú)立性動(dòng)機(jī)水平時(shí)間設(shè)施環(huán)境第八頁，共二十五頁，編輯于2023年，星期一一對(duì)一評(píng)價(jià)質(zhì)量保證卷面測試：在每一項(xiàng)后都詢問學(xué)習(xí)者做出特定反應(yīng)的原因操作指示:要保證學(xué)習(xí)者能夠明白指示內(nèi)容并能根據(jù)指示操作。評(píng)價(jià)量表:要評(píng)價(jià)的要點(diǎn)是否可觀察；對(duì)評(píng)價(jià)要點(diǎn)的解釋是否清楚；評(píng)價(jià)要點(diǎn)的次序安排是否有效評(píng)價(jià)者的打分表：區(qū)分標(biāo)準(zhǔn)和所區(qū)分的等級(jí)數(shù)是否合理，為評(píng)價(jià)者所留觀察，判斷，記錄時(shí)間是否充足評(píng)價(jià)者判斷的可靠性：可以在有時(shí)間間隔下兩次或多次評(píng)價(jià)同一行為或產(chǎn)品評(píng)價(jià)策略：看看所獲數(shù)據(jù)是否符合邏輯，可解釋第九頁，共二十五頁，編輯于2023年，星期一一對(duì)一評(píng)價(jià)注意事項(xiàng)注意：不要把特定學(xué)習(xí)者的反應(yīng)過于一般化。確定學(xué)習(xí)時(shí)間是一對(duì)一評(píng)價(jià)關(guān)注的一個(gè)方面，但這個(gè)從中得到的時(shí)間只是大概的，因?yàn)榘藢W(xué)習(xí)者和設(shè)計(jì)者的交流時(shí)間，可以按估計(jì)減去，但比較不準(zhǔn)確。一對(duì)一評(píng)價(jià)后達(dá)到的效果：教學(xué)在詞匯、語言復(fù)雜度、舉例、解釋等方面適合學(xué)習(xí)者；能夠使學(xué)習(xí)者具有正確態(tài)度，基本達(dá)到學(xué)習(xí)目標(biāo)；適合學(xué)習(xí)者，現(xiàn)有資源及環(huán)境，具有可行性。第十頁，共二十五頁，編輯于2023年，星期一小組評(píng)價(jià)目的：確定在一對(duì)一評(píng)價(jià)后所作的改動(dòng)是否有效，找出學(xué)習(xí)者在學(xué)習(xí)中仍然存在的問題確定學(xué)習(xí)者在不和教師交互的情況下使用教學(xué)材料的情況選擇學(xué)習(xí)者：盡量代表目標(biāo)人群各種類型，大概8－20人。類型維度：學(xué)業(yè)水平（高，一般，低）；習(xí)慣的學(xué)習(xí)方式；學(xué)習(xí)者成熟度；第十一頁，共二十五頁，編輯于2023年，星期一小組評(píng)價(jià)過程：評(píng)價(jià)者（或教師）首先向?qū)W習(xí)者說明教學(xué)材料處于開發(fā)的形成性評(píng)價(jià)階段，需要獲得學(xué)習(xí)者的反饋。然后按照教學(xué)材料設(shè)計(jì)的實(shí)際使用方式組織學(xué)習(xí)者使用。在整個(gè)過程中，盡可能減少教師的參與。小組評(píng)價(jià)后應(yīng)達(dá)到的效果：能在最終教學(xué)環(huán)境中適合大部分目標(biāo)人群第十二頁，共二十五頁，編輯于2023年，星期一小組評(píng)價(jià)信息收集通常是學(xué)習(xí)者在前測和后測中的分?jǐn)?shù)，前測（入門能力，教學(xué)目標(biāo)能力），后測（教學(xué)最終目標(biāo)和階段目標(biāo)）對(duì)教學(xué)的態(tài)度的問卷（有時(shí)還有后續(xù)的訪談）搜集的關(guān)于教學(xué)可行性信息包括：要求學(xué)習(xí)者完成學(xué)習(xí)和測試的時(shí)間；按預(yù)計(jì)形式在預(yù)計(jì)環(huán)境中實(shí)施教學(xué)的可行性和花費(fèi)；實(shí)施和管理教學(xué)者的態(tài)度第十三頁，共二十五頁，編輯于2023年，星期一場景評(píng)價(jià)場景評(píng)價(jià)在與最終教學(xué)環(huán)境盡可能相像的環(huán)境下進(jìn)行。目的：小組評(píng)價(jià)后的修改是否有效是否可在最終教學(xué)環(huán)境下使用選擇學(xué)習(xí)者：

盡量挑選一個(gè)能代表目標(biāo)人群的典型單位人群（30人左右）第十四頁，共二十五頁，編輯于2023年，星期一場景評(píng)價(jià)過程：類似于小組評(píng)價(jià)，不同在于：設(shè)計(jì)者角色只能是觀察者，教學(xué)必須由教師組織，因此設(shè)計(jì)者要對(duì)教師進(jìn)行適當(dāng)指導(dǎo)使其了解如何組織進(jìn)行。測試的減少。經(jīng)過小規(guī)模評(píng)價(jià)后，前測和后測都已經(jīng)得到了修正，主要集中在重要的入門能力及評(píng)價(jià)學(xué)習(xí)環(huán)境的可行性上。實(shí)地評(píng)價(jià)效果：在預(yù)期學(xué)習(xí)情況下教學(xué)能使學(xué)習(xí)者產(chǎn)生要求達(dá)到的學(xué)習(xí)成果和態(tài)度。要收集的信息：學(xué)習(xí)者成就，態(tài)度，教師教學(xué)過程，態(tài)度，資源，如時(shí)間，花費(fèi)，空間，設(shè)備第十五頁，共二十五頁，編輯于2023年，星期一應(yīng)用環(huán)境下的形成性評(píng)價(jià)

必要性：教學(xué)最終關(guān)注的是學(xué)習(xí)者是否能在實(shí)際環(huán)境下應(yīng)用所學(xué)技能。因此對(duì)教學(xué)材料進(jìn)行形成性評(píng)價(jià)時(shí)有必要進(jìn)行應(yīng)用環(huán)境下的形成性評(píng)價(jià)。應(yīng)用環(huán)境下的形成性評(píng)價(jià)可在形成性評(píng)價(jià)的任何一個(gè)階段后進(jìn)行。目的：1學(xué)習(xí)者是否認(rèn)識(shí)到所學(xué)新技能在工作中的作用并加以應(yīng)用？2如果已經(jīng)使用，對(duì)所在機(jī)構(gòu)有何作用？3學(xué)習(xí)者及其同事對(duì)改進(jìn)教學(xué)有何建議？對(duì)象：1參加一對(duì)一評(píng)價(jià)的全部學(xué)習(xí)者（在階段一結(jié)束后進(jìn)行）2參加小組及場景評(píng)價(jià)的部分學(xué)習(xí)者3所選學(xué)習(xí)者所在機(jī)構(gòu)的上級(jí)，同事或下級(jí)第十六頁，共二十五頁，編輯于2023年，星期一應(yīng)用環(huán)境下的形成性評(píng)價(jià)過程：在形成性評(píng)價(jià)的任一階段結(jié)束后，告知學(xué)習(xí)者以后某個(gè)時(shí)間會(huì)再和他們聯(lián)系了解這次學(xué)習(xí)及其作用。等待一段時(shí)間后再聯(lián)系學(xué)習(xí)者，進(jìn)行應(yīng)用環(huán)境下的形成性評(píng)價(jià)。搜集信息：直接觀察查看工作表現(xiàn)記錄學(xué)習(xí)者工作機(jī)構(gòu)內(nèi)上級(jí)，同事或下級(jí)的觀點(diǎn)應(yīng)用環(huán)境形成性評(píng)價(jià)的效果：教學(xué)在促進(jìn)技能遷移上的優(yōu)缺點(diǎn)遷移和技能使用上可以得到更好支持的地方解決阻礙運(yùn)用技能于實(shí)際場景的地方。第十七頁，共二十五頁，編輯于2023年，星期一應(yīng)用環(huán)境下的形成性評(píng)價(jià)問題對(duì)象方法所學(xué)技能是否得以遷移？技能的使用情況如何（頻繁程度，應(yīng)用場景）？在物資設(shè)施、人際和管理上都有那些因素有助于技能的應(yīng)用和遷移？在物資設(shè)施，人際和管理上都有那些因素阻礙了技能的應(yīng)用和遷移？應(yīng)用所學(xué)技能后是否有助于解決最初問題？怎樣解決的？有何說明？培訓(xùn)還可以怎樣改善，提高？學(xué)習(xí)者同事下級(jí)管理者顧客公司記錄訪談問卷觀察分析公司記錄評(píng)價(jià)問題，信息來源及搜集方式第十八頁，共二十五頁，編輯于2023年，星期一形成性評(píng)價(jià)的設(shè)計(jì)框架組成部分學(xué)習(xí)類型內(nèi)容清晰度學(xué)習(xí)動(dòng)機(jī)施行學(xué)前活動(dòng)動(dòng)機(jī)激發(fā)教學(xué)目標(biāo)入門能力內(nèi)容呈現(xiàn)順序安排單元大小內(nèi)容實(shí)例學(xué)生參與練習(xí)反饋評(píng)測前測后測應(yīng)用環(huán)境來源學(xué)習(xí)理論專家領(lǐng)域?qū)＜覍W(xué)習(xí)者#學(xué)習(xí)者學(xué)習(xí)者教師途徑核查表訪談核查表訪談?dòng)^察考試

材料觀察訪談考試觀察訪談第十九頁，共二十五頁，編輯于2023年，星期一形成性評(píng)價(jià)的主要問題學(xué)習(xí)材料是否適合特定類型的學(xué)習(xí)？材料是否完整包括了所需學(xué)習(xí)的各個(gè)技能，各個(gè)技能的學(xué)習(xí)順序安排是否合邏輯？材料表述是否清晰，易理解？材料是否能激發(fā)學(xué)習(xí)者的學(xué)習(xí)動(dòng)機(jī)？材料所采用的媒體形式是否能有效施行？第二十頁，共二十五頁，編輯于2023年，星期一所搜集的數(shù)據(jù)信息學(xué)習(xí)者的入門能力測試，前測，后測結(jié)果以及實(shí)際應(yīng)用環(huán)境表現(xiàn)學(xué)習(xí)者在材料上有困難地方所做的標(biāo)記，評(píng)論學(xué)習(xí)者在態(tài)度問卷，訪談中表現(xiàn)的對(duì)教學(xué)內(nèi)容和教學(xué)過程的看法學(xué)習(xí)者完成教學(xué)各個(gè)步驟所需的時(shí)間領(lǐng)域?qū)＜业囊庖妼W(xué)習(xí)者所在機(jī)構(gòu)管理者對(duì)技能實(shí)際運(yùn)用情況的看法第二十一頁，共二十五頁，編輯于2023年，星期一對(duì)選定材料的形成性評(píng)價(jià)目的：

確定該材料是否適合于特定環(huán)境中的特定人群。找出該材料需要增刪之處以及教學(xué)步驟中需要變動(dòng)的地方，以提高材料的使用效果。評(píng)價(jià)前準(zhǔn)備：分析材料開發(fā)過程的記錄；特定人群使用材料的效果；特別是要研究一下材料在場景評(píng)價(jià)中的使用過程；研究對(duì)材料使用程序的描述；對(duì)材料附帶的測試要分析其與行為目標(biāo)的關(guān)系，分析是否需要增加其它測試或態(tài)度問卷。評(píng)價(jià)過程類似于場景評(píng)價(jià)第二十二頁，共二十五頁，編輯于2023年，星期一對(duì)教師引導(dǎo)型教學(xué)的形成性評(píng)價(jià)對(duì)教師引導(dǎo)型的教學(xué)進(jìn)行形成性評(píng)價(jià)的目的和自學(xué)材料的基本相同，即確定教學(xué)是否有效以及如何改進(jìn)。當(dāng)然，也基本沒有時(shí)間進(jìn)行一對(duì)一甚至是小規(guī)模評(píng)價(jià)。評(píng)價(jià)過程和場景評(píng)價(jià)階段最為接近。對(duì)選定材料和教師引導(dǎo)型教學(xué)的場景評(píng)價(jià)經(jīng)常是交織在一起的。選定材料的使用經(jīng)常需要教師的交互作用，同樣，教師指導(dǎo)也與一些準(zhǔn)備好的教學(xué)材料離不開。在這兩種情況下，會(huì)進(jìn)行大致相同的場景評(píng)價(jià)程序并進(jìn)行類似的修訂。第二十三頁，共二十五頁，編輯于2023年，星期一影響形成性評(píng)價(jià)的一些因素關(guān)于環(huán)境：1所有技術(shù)設(shè)備都要有效運(yùn)行。2在形成性評(píng)價(jià)早期階段，尤其是一對(duì)一評(píng)價(jià)中環(huán)境比較安靜有助于學(xué)習(xí)者集中注意力。關(guān)于學(xué)習(xí)者：1在形成性評(píng)價(jià)的任何階段選擇學(xué)習(xí)者時(shí)，都要避免完全依賴教師確定學(xué)習(xí)者的入門知識(shí)。進(jìn)行入門知識(shí)測試以確定被試是否為該教學(xué)材料的目標(biāo)人群十分必要。2關(guān)于怎樣對(duì)待那些已經(jīng)掌握部分教學(xué)內(nèi)容或不具備入門技能的學(xué)習(xí)者？是否要將其從形成性評(píng)價(jià)的學(xué)習(xí)者中去除？第二十四頁，共二十五頁，編輯于2023年，星期一影響形成性評(píng)價(jià)的一些因素關(guān)于評(píng)價(jià)結(jié)果：