DST公司E-Learning系統(tǒng)效果評(píng)價(jià)體系研究

DST公司E-Learning系統(tǒng)效果評(píng)價(jià)體系研究摘要近年來(lái)，使用E-Learning系統(tǒng)進(jìn)行員工培訓(xùn)已經(jīng)成為企業(yè)知識(shí)管理的重要工具之一，對(duì)它的研究也已經(jīng)成為一個(gè)熱門(mén)的研究領(lǐng)域，得到了學(xué)術(shù)界和企業(yè)界的普遍關(guān)注。越來(lái)越多的企業(yè)都開(kāi)始在企業(yè)實(shí)施知識(shí)管理時(shí)推廣E-Learning系統(tǒng)，并逐漸加大企業(yè)在E-Learning系統(tǒng)方面的投資力度。在國(guó)內(nèi)，雖然E-Learning這個(gè)概念進(jìn)入我國(guó)的時(shí)間跨度還不是很長(zhǎng)，但是我國(guó)對(duì)于E-Learning的管理實(shí)踐卻已經(jīng)從一個(gè)起步階段，逐步進(jìn)入一個(gè)關(guān)注度逐漸提升的快速發(fā)展階段。對(duì)于企業(yè)來(lái)說(shuō)，企業(yè)實(shí)施E-Learning系統(tǒng)是以提高企業(yè)的知識(shí)管理水平和組織知識(shí)管理績(jī)效為目的的，以求在激烈競(jìng)爭(zhēng)的市場(chǎng)環(huán)境中利用企業(yè)所擁有的知識(shí)和較高的員工技術(shù)水平為企業(yè)創(chuàng)造競(jìng)爭(zhēng)優(yōu)勢(shì)和持續(xù)競(jìng)爭(zhēng)優(yōu)勢(shì)，進(jìn)而謀求組織的長(zhǎng)遠(yuǎn)發(fā)展。然而，由于受到各種各樣原因的影響，不少企業(yè)雖然構(gòu)建了E-Learning系統(tǒng)，但卻往往沒(méi)有收到預(yù)期的效果。那么企業(yè)的E-Learning活動(dòng)與E-Learning系統(tǒng)效果評(píng)價(jià)之間的關(guān)系到底如何？為什么企業(yè)實(shí)施了E-Learning培訓(xùn)卻沒(méi)能夠有效提高員工的技術(shù)水平？如何有效和有說(shuō)服力的去評(píng)價(jià)企業(yè)E-Learning培訓(xùn)系統(tǒng)的效果？組織該如何運(yùn)用有效的評(píng)價(jià)手法，對(duì)E-Learning系統(tǒng)的效果進(jìn)行整體考量，并進(jìn)而影響到企業(yè)的知識(shí)管理活動(dòng)？對(duì)于這些問(wèn)題經(jīng)學(xué)術(shù)界屢有探討，但多聚焦于邏輯推理，偶有實(shí)證研究，卻未能夠?qū)-Learning系統(tǒng)和評(píng)價(jià)體系二者有機(jī)結(jié)合起來(lái)。對(duì)這些問(wèn)題的正確認(rèn)識(shí)和理解，關(guān)系到企業(yè)E-Learning實(shí)踐的成功與否，同時(shí)也有助于我們對(duì)國(guó)內(nèi)企業(yè)有關(guān)E-Learning系統(tǒng)效果評(píng)價(jià)方面進(jìn)行了解與掌握，對(duì)企業(yè)的E-Learning系統(tǒng)培訓(xùn)效果的評(píng)價(jià)和E-Learning系統(tǒng)的改善都具有一定的指導(dǎo)意義。本文研究的課題是如何運(yùn)用科學(xué)的管理方法進(jìn)行E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)方法的選擇，通過(guò)對(duì)DST公司現(xiàn)有E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)的困境進(jìn)行分析研究,指出存在的問(wèn)題,結(jié)合DST公司實(shí)際情況,提出了運(yùn)用德?tīng)柗品ê蛯哟畏治龇ㄏ嘟Y(jié)合的方法給DST公司設(shè)計(jì)新的E-Learning評(píng)價(jià)指標(biāo)，并且將模糊綜合評(píng)價(jià)法和層次分析法相進(jìn)行有機(jī)結(jié)合，對(duì)DST公司E-Learning系統(tǒng)培訓(xùn)效果的整體狀況進(jìn)行科學(xué)的評(píng)價(jià)，為系統(tǒng)的后續(xù)完善和改進(jìn)提供有依據(jù)的建議和指導(dǎo)意見(jiàn)。關(guān)鍵詞:德?tīng)柗品?層次分析法;E-Learning;E-Learning評(píng)價(jià)指標(biāo)；評(píng)價(jià)指標(biāo)權(quán)重確立;模糊綜合評(píng)價(jià)法。AStudyonEffectivenessEvaluationofDSTCompany’sE-LearningSystemAbstract

Inrecentyears,tousetheE-Learningsystemforemployeetraininghasbecomeoneofthemostimportanttoolsofenterpriseknowledgemanagement,theresearchonwhichhasbecomeabuzzingfield,receivingwidespreadattentioninacademiccirclesandbusinesscircles.MoreandmoreenterprisesarebeginningtopromotetheE-Learningsystemintheimplementationofknowledgemanagement,andgraduallyincreaseinvestmentinE-Learningsystem.InChina,althoughthetimespanofE-Learning’sarrivalinChinaisnotverylong,China’sattentiontoitsmanagementpracticehasenteredthestageofrapiddevelopmentgraduallyfromastartingstage.Forenterprises,theirpurposeoftheimplementationofE-Learningsystemistoimprovetheperformanceofknowledgemanagementandorganizationalknowledgemanagement,inordertocreatecompetitiveadvantagesandsustainablecompetitiveadvantagesforenterprisesinthehighlyfiercemarketenvironmentusingtheirknowledgeandemployeeshightechnicallevel.However,duetotheimpactofvariousreasons,althoughestablishtheE-Learningsystem,manyenterprisesoftendonotachievethedesiredresults.SowhatistherelationshipbetweentheE-LearningactivityandtheevaluationoftheE-Learningsystem?WhydotheenterpriseswhohaveimplementedE-Learningtrainingfailstoimprovetheemployees’technicalleveleffectively?HowtoevaluatetheeffectivenessofE-Learningtrainingsystemeffectivelyandconvincingly?HowtheorganizationtoconducttheoverallconsiderationontheeffectivenessoftheE-Learningsystemandthenaffecttheenterpriseknowledgemanagementactivities?Theseproblemshavebeendiscussedfrequentlyinacademiccircles,butmoreoflogicalreasoning,lackofempiricalresearch,whichisunabletocombineE-Learningsystemwithevaluationsystemorganically.CorrectunderstandingoftheseissuesisnotonlyrelatedtothesuccessfulpracticeofE-Learningsystem,butalsohelpsustoknowandgrasptheeffectivenessevaluationofE-Learningsystemindomesticenterprises,meanwhile,ithasacertainguidingsignificancetotheevaluationofthetrainingeffectandtheimprovementofE-Learningsystem.TheresearchtopicofthispaperishowtousethescientificmanagementmethodtoevaluatethetrainingeffectofE-Learningsystem.Inthispaper,theexistingproblemsarepointedoutthroughtheanalysisandresearchonthepredicamentsoftrainingeffectevaluationoftheexistingDSTcompany'sE-Learningsystem,thenewevaluationindexofDSTcompany'sE-LearningsystemisdesignedcombiningwiththeactualsituationofDSTcompany,thescientificevaluationontheoverallsituationofthetrainingeffectofDSTcompany'sE-Learningsystemisconductedusingthecombinationoffuzzycomprehensiveevaluationmethodandanalysishierarchyprocess,soastoprovidethesolidsuggestionsandguidancefortheimprovementofthesystem.Keywords:Delphymethod;analytichierarchyprocess(AHP);E-Learning;evaluationindexofE-Learning;establishmentofevaluationindexweight;fuzzycomprehensiveevaluationmethod.目錄第一章:緒論1.1國(guó)內(nèi)外研究現(xiàn)狀及文件綜述1.2研究目的和意義1.3研究用的方法和思路第二章：DST公司E-Learning系統(tǒng)效果評(píng)價(jià)現(xiàn)狀和存在的問(wèn)題2.1行業(yè)背景2.2公司背景2.3E-Learning系統(tǒng)效果評(píng)價(jià)現(xiàn)狀2.4存在的問(wèn)題第三章：評(píng)價(jià)理論基礎(chǔ)及相關(guān)文獻(xiàn)綜述3.1Delphi法3.1.1Delphi法名稱來(lái)源3.1.2德?tīng)柗品ǖ陌l(fā)展過(guò)程3.1.3德?tīng)柗品ǖ脑?.1.4德?tīng)柗品ㄊ褂梅椒?.2層次分析法3.2.1層次分析法的起源和應(yīng)用領(lǐng)域3.2.2層次分析法的原理和構(gòu)成3.2.3使用AHP的方法3.3Saaty標(biāo)度法3.4模糊評(píng)估法第四章：評(píng)價(jià)指標(biāo)體系的設(shè)計(jì)和權(quán)重的確立4.1評(píng)價(jià)指標(biāo)體系構(gòu)建原則、方法及框架4.1.1評(píng)價(jià)指標(biāo)的概念和評(píng)價(jià)指標(biāo)體系的構(gòu)建原則4.1.2評(píng)價(jià)指標(biāo)體系構(gòu)建方法4.1.3評(píng)價(jià)指標(biāo)體系框架4.2指標(biāo)的標(biāo)度方法4.2.1采用Saaty標(biāo)度法對(duì)指標(biāo)進(jìn)行賦值4.2.2利用delphi法構(gòu)建判斷矩陣4.3AHP層次分析法計(jì)算權(quán)重4.3.1求解最大特征根和特征向量4.3.2矩陣的一致性檢驗(yàn)4.3.3綜合權(quán)重計(jì)算結(jié)果第五章：系統(tǒng)的綜合評(píng)價(jià)5.1問(wèn)卷統(tǒng)計(jì)5.2模糊關(guān)系矩陣的構(gòu)建5.3確定因素重要程度模糊集5.4計(jì)算模糊綜合評(píng)價(jià)集5.5模糊綜合評(píng)價(jià)結(jié)果 結(jié)論第一章：緒論人力資本是指勞動(dòng)者通過(guò)學(xué)?；蛘呗殘?chǎng)的正規(guī)和非正規(guī)教育、以及人生經(jīng)驗(yàn)所積累和孕育的技能、技巧、判斷能力、領(lǐng)導(dǎo)能力集合起來(lái)的非物理資本的總和，根據(jù)舒爾茨的人力資本理論，人力資源作為企業(yè)無(wú)形資產(chǎn)的一種，與資源、技術(shù)、資金等傳統(tǒng)生產(chǎn)要素一樣，在企業(yè)發(fā)展中，擔(dān)當(dāng)著非常重要的角色。當(dāng)人力資源作為一種資本深入地滲透到企業(yè)運(yùn)行系統(tǒng)中時(shí)，所創(chuàng)造出的競(jìng)爭(zhēng)優(yōu)勢(shì)越來(lái)越難明顯和難以被復(fù)制，這種競(jìng)爭(zhēng)力有較好的持續(xù)性和傳承性，當(dāng)這種競(jìng)爭(zhēng)力作用在企業(yè)參加行業(yè)競(jìng)爭(zhēng)的運(yùn)作中時(shí)，往往有著較為明顯的效果。企業(yè)培訓(xùn)作為提升人力資源水平的一個(gè)重要因素的重要性由此可見(jiàn)一斑。在企業(yè)培訓(xùn)的過(guò)程中，考慮到常規(guī)的面對(duì)面培訓(xùn)所面臨的時(shí)間、空間限制，越來(lái)越多的企業(yè)都開(kāi)始采用E-Learning系統(tǒng)進(jìn)行人力資源培訓(xùn)。E-Learning是一種有別于傳統(tǒng)遠(yuǎn)程教育、依托于網(wǎng)絡(luò)進(jìn)行的、可以進(jìn)行實(shí)時(shí)溝通的教育方式。區(qū)別于傳統(tǒng)的教育方式，E-Learning不需要面對(duì)面的進(jìn)行教授，它傾向于對(duì)信息資源的網(wǎng)絡(luò)化，利用網(wǎng)絡(luò)的及時(shí)通訊功能和留言功能，完成及時(shí)溝通和信息反饋。。E-Learning不會(huì)取代傳統(tǒng)教育,但是會(huì)從根本上改變傳統(tǒng)教育的功能，并且可以完善和彌補(bǔ)傳統(tǒng)教育的不足之處。[注1]出處上海市教科院智力開(kāi)發(fā)研究所，美國(guó)教育部教育技術(shù)白皮書(shū)，2001年4月。E-Learning中的E在英文上有兩重含義，一重是electronic（電子的）的意思，主要表達(dá)出這種學(xué)習(xí)方式是依托電子智能設(shè)備（如個(gè)人電腦、光盤(pán)、DVD、數(shù)碼電視、手機(jī)終端、移動(dòng)電話、PDA等）進(jìn)行學(xué)習(xí)，另外一重含義是指Ethernet（以太網(wǎng)），主要是指這種學(xué)習(xí)方式需要依賴網(wǎng)絡(luò)進(jìn)行必要的信息傳輸和討論交流。進(jìn)行E-Learning學(xué)習(xí)時(shí)，可以通過(guò)連接到網(wǎng)絡(luò)的電腦或者其他電子設(shè)備，運(yùn)用電子郵件、電子會(huì)議、視頻送信等的技術(shù)方式的靈活溝通。E-Learning的起源，可以追溯到1980年代火爆全球的電視教育和廣播教育，為了能夠很好的提供遠(yuǎn)程教育和降低區(qū)域教育成本，美國(guó)1980年代已經(jīng)開(kāi)始使用廣播通信和衛(wèi)星通信技術(shù)，構(gòu)筑出“在全美范圍內(nèi)的同一時(shí)間內(nèi)播放同一講座”的遠(yuǎn)程教育結(jié)構(gòu)。這種結(jié)構(gòu)在傳輸知識(shí)的時(shí)候依托衛(wèi)星或者廣播通訊，相比傳統(tǒng)課堂來(lái)講，互動(dòng)的及時(shí)性不能保證，教師也沒(méi)辦法很好的掌握學(xué)員的進(jìn)度和接受程度，為了彌補(bǔ)傳授這些缺陷，在意見(jiàn)反饋和學(xué)習(xí)交流的時(shí)候，往往依托電話技術(shù)或者郵政信函的方式進(jìn)行，但是相對(duì)的時(shí)間成本和通訊成本較高，學(xué)員的互動(dòng)性不強(qiáng)。在個(gè)人電腦普及的初期，美國(guó)就有機(jī)構(gòu)開(kāi)始開(kāi)發(fā)出利用電腦進(jìn)行的各種形態(tài)學(xué)習(xí)和教育的系統(tǒng)，最早被稱為計(jì)算機(jī)支援教育計(jì)劃（以computerassistedinstruction或computeraidedinstruction等計(jì)劃為首）。隨后，逐漸發(fā)展出CBT（computerbasedtraining）和WBT（webbasedtraining）等教育方式。但是由于缺乏相關(guān)的互動(dòng)性和較高的硬件成本，一直沒(méi)有得到很好的普及。不過(guò)，1990年代隨著使用個(gè)人電腦的成本降低和互聯(lián)網(wǎng)的雙向互動(dòng)性，依托電腦進(jìn)行遠(yuǎn)程教育的E-Learning一詞開(kāi)始出現(xiàn)在人們的視野中，E-Learning系統(tǒng)開(kāi)始被廣泛關(guān)注和應(yīng)用。日本于2001年被提出的E-Japan構(gòu)想，中國(guó)在1990年代末期也開(kāi)始了E-Learning的研究和應(yīng)用。[注2][注3]出處先進(jìn)學(xué)習(xí)基盤(pán)協(xié)議會(huì)（ALIC）編著（2003）『eラーニングが創(chuàng)る近未來(lái)教育』P4,オーム社,ISBN4-274-06541-3荒木浩二著（2002）『実踐eラーニング』P4,毎日新聞社,ISBN4-620-31524-91.1國(guó)內(nèi)外研究現(xiàn)狀為了更好的了解過(guò)內(nèi)外的研究現(xiàn)狀，本人借助知網(wǎng)平臺(tái)，將檢索范圍設(shè)定為期刊和博碩士論文，關(guān)鍵字設(shè)置為E-Learning效果評(píng)價(jià)，截止到2017年1月，以此為關(guān)鍵詞的只有四篇文章。將關(guān)鍵字設(shè)置為培訓(xùn)效果評(píng)價(jià)，共檢索出23297篇相關(guān)文章。在日本論文和書(shū)籍檢索網(wǎng)站CINII（http://ci.nii.ac.jp/）上輸入【E-Learning效果評(píng)價(jià)】的日語(yǔ)關(guān)鍵詞，得到的36篇博碩士論文和期刊文章。綜合考慮論文的引用次數(shù)、院校等級(jí)并且根據(jù)題目進(jìn)行分類篩檢，本文重點(diǎn)分析了12篇相關(guān)文章，這些文章分別從理論和實(shí)踐的角度對(duì)評(píng)價(jià)手法的選擇、評(píng)價(jià)指標(biāo)體系的建立等進(jìn)行細(xì)致的分析，反應(yīng)出了目前國(guó)內(nèi)外學(xué)者對(duì)于企業(yè)E-Learning培訓(xùn)效果評(píng)價(jià)的研究狀態(tài)。為了更加直觀的介紹上述文章的研究狀況，本文將從理論分析和實(shí)踐調(diào)研兩個(gè)角度對(duì)相關(guān)文獻(xiàn)的狀況進(jìn)行簡(jiǎn)述。其中，樓旭明等認(rèn)為企業(yè)E-Learning培訓(xùn)效果評(píng)價(jià)模型在從反應(yīng)層、學(xué)習(xí)層和轉(zhuǎn)化層的構(gòu)建角度分析，從參與培訓(xùn)者的主觀角度出發(fā)，主要考察參加培訓(xùn)者的知識(shí)技能的掌握程度，并關(guān)注培訓(xùn)后學(xué)習(xí)內(nèi)容的轉(zhuǎn)化狀況；[注4]出處：樓旭明企業(yè)E-Learning培訓(xùn)效果評(píng)價(jià)模型及指標(biāo)體系研究中國(guó)遠(yuǎn)程教育2015-10-30段金菊等從過(guò)程性評(píng)估的角度對(duì)E-Learning培訓(xùn)效果評(píng)價(jià)提出了新的思考角度；[注5]段金菊\(chéng)o"紫色刊名為"電化教育研究2014-10-01謝東聞等利用kirkpatrick的方法確立了四層評(píng)估指標(biāo)模型[注6]出處謝東聞；綜上所述不難看出，對(duì)于企業(yè)培訓(xùn)的效果評(píng)價(jià)，國(guó)內(nèi)的研究較為廣泛，但是很少有人將其擴(kuò)展到E-Learning培訓(xùn)效果評(píng)價(jià)這個(gè)領(lǐng)域，結(jié)合一些其他的企業(yè)知識(shí)管理論文來(lái)看，目前我國(guó)對(duì)企業(yè)E-Learning培訓(xùn)效果評(píng)價(jià)研究還處于起步狀態(tài)。1.2研究的目的和意義1.2.1研究的目的本文研究的課題是如何運(yùn)用科學(xué)的管理方法對(duì)企業(yè)E-Learning效果評(píng)價(jià)方法進(jìn)行選擇，目的是通過(guò)對(duì)DST公司及國(guó)內(nèi)其他企業(yè)現(xiàn)有E-Learning系統(tǒng)學(xué)習(xí)效果評(píng)價(jià)困境進(jìn)行分析研究,指出存在的問(wèn)題,結(jié)合DST公司實(shí)際情況,提出了運(yùn)用德?tīng)柗品ń⒃u(píng)價(jià)指標(biāo)，層次分析法和模糊綜合評(píng)價(jià)法相結(jié)合的方法對(duì)DST公司的E-Learning培訓(xùn)體系的效果進(jìn)行客觀科學(xué)的評(píng)價(jià)。1.2.2理論意義1、全面梳理了企業(yè)E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)及其模型建立的相關(guān)理論依據(jù),探討了企業(yè)E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)的理論方法,提出了創(chuàng)新的研究思路。2、本論文通過(guò)對(duì)文獻(xiàn)資料的提煉、采取德?tīng)柗品ㄍ瓿闪似髽I(yè)E-Learning效果評(píng)價(jià)指標(biāo)的選取和確定的工作,豐富和完善了企業(yè)E-Learning效果評(píng)價(jià)指標(biāo)。3、運(yùn)用層次分析方法,通過(guò)數(shù)學(xué)建模和計(jì)算，結(jié)合MCE和ExpertChoice等軟件進(jìn)行輔助確認(rèn),合理計(jì)算出企業(yè)E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)的各項(xiàng)指標(biāo)的權(quán)重。建立出完善的企業(yè)E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)指標(biāo)體系。1.2.3現(xiàn)實(shí)意義4、企業(yè)E-Learning效果評(píng)價(jià)體系的構(gòu)建和指標(biāo)體系的建立,可以為企業(yè)提供可操作性的E-Learning培訓(xùn)效果評(píng)價(jià)的理論指導(dǎo),從而為同行業(yè)企業(yè)E-Learning培訓(xùn)的有效性和企業(yè)E-Learning培訓(xùn)系統(tǒng)的完善提供理論上的指導(dǎo)。5、準(zhǔn)確的識(shí)別出企業(yè)E-Learning培訓(xùn)系統(tǒng)各環(huán)節(jié)中存在的問(wèn)題,可以幫助企業(yè)提高E-Learning培訓(xùn)工作的有效性。E-Learning系統(tǒng)培訓(xùn)效果的整體評(píng)價(jià)是培訓(xùn)工作體系中的最后環(huán)節(jié),具體的評(píng)價(jià)涉及到內(nèi)容分析、目標(biāo)確定、評(píng)價(jià)方法的選擇等。因此,本論文在對(duì)企業(yè)E-Learning培訓(xùn)效果評(píng)價(jià)的現(xiàn)實(shí)狀況現(xiàn)狀進(jìn)行細(xì)致分析的同時(shí),有針對(duì)性的對(duì)企業(yè)E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)體系中存在問(wèn)題的地方,提出了相應(yīng)的改善意見(jiàn)。這對(duì)我國(guó)企業(yè)E-Learning培訓(xùn)系統(tǒng)效果評(píng)價(jià)和系統(tǒng)完善都有一定的指導(dǎo)意義。1.3論文的研究方法、研究思路和主要內(nèi)容1.3.1論文的研究方法通過(guò)用Delphi專家評(píng)分法，確定出評(píng)價(jià)的指標(biāo)，通過(guò)指標(biāo)聚類分析方法，查詢指標(biāo)的歸類狀況，然后用AHP法確定各個(gè)指標(biāo)的權(quán)重，最后校驗(yàn)指標(biāo)權(quán)重的一致性比例是否符合預(yù)期。最后制定評(píng)分規(guī)則和評(píng)價(jià)體系，對(duì)于接受培訓(xùn)的人員的培訓(xùn)效果進(jìn)行綜合評(píng)價(jià)，給出較為可續(xù)的評(píng)定。評(píng)價(jià)時(shí)將模糊綜合評(píng)價(jià)法(（FuzzyComprehensiveEvaluation，F(xiàn)CE）和層次分析法（AnalyticHierarchyProcess，AHP）相結(jié)合的，先用層析分析法確定因素集，然后用模糊綜合評(píng)判確定評(píng)判效果。模糊法是在層次法之上，兩者相互融合，對(duì)評(píng)價(jià)有著很好的可靠性。1.3.2論文的研究思路本文在進(jìn)行研究的時(shí)候，主要可以分成如下幾個(gè)步驟，首先確定出企業(yè)在E-Learning系統(tǒng)運(yùn)行和培訓(xùn)效果評(píng)價(jià)時(shí)的困境，發(fā)現(xiàn)要解決的問(wèn)題，第二，采用德?tīng)柗茖＜艺{(diào)查法和Saaty1-9標(biāo)度法，對(duì)專家意見(jiàn)進(jìn)行整理，確定出系統(tǒng)的評(píng)價(jià)指標(biāo)。第三，采用層次分析法，對(duì)上述指標(biāo)進(jìn)行確立權(quán)重份額。建立權(quán)重分配表。最后，通過(guò)對(duì)調(diào)查問(wèn)卷表的收集和數(shù)據(jù)匯總，對(duì)系統(tǒng)的整體效果進(jìn)行評(píng)價(jià)。1.3.3論文的主要內(nèi)容本論文共分為理論研究、企業(yè)E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)體系的建立，數(shù)學(xué)建模及一致性檢驗(yàn)、問(wèn)卷匯總綜合評(píng)價(jià)四個(gè)部分,分六章闡述整個(gè)論文。第一章緒論。主要對(duì)目前E-Learning效果評(píng)價(jià)研究方面國(guó)內(nèi)外現(xiàn)狀的進(jìn)行了介紹；從企業(yè)E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)的現(xiàn)狀分析出發(fā),闡述了研究的理論和現(xiàn)實(shí)意義；概括了論文的主要研究?jī)?nèi)容、研究方法、研究思路和主要?jiǎng)?chuàng)新點(diǎn)。第二章問(wèn)題和研究背景描述。在對(duì)企業(yè)背景、行業(yè)背景進(jìn)行了充分介紹的基礎(chǔ)上,發(fā)現(xiàn)并指出影響企業(yè)E-Learning系統(tǒng)培訓(xùn)的因素，通過(guò)對(duì)行業(yè)及企業(yè)企業(yè)E-Learning系統(tǒng)運(yùn)行狀況的分析，指出DST公司E-Learning系統(tǒng)效果評(píng)價(jià)體系存在的問(wèn)題。第三章評(píng)價(jià)理論基礎(chǔ)及相關(guān)文獻(xiàn)綜述。本章著重介紹所采用的各類手法的應(yīng)用領(lǐng)域和優(yōu)缺點(diǎn)。對(duì)德?tīng)柗品?、層次分析法以及模糊評(píng)價(jià)法的使用方法也作出了詳細(xì)的介紹，在結(jié)合前人研究結(jié)果的前提下，提出了將層次分析法和模糊綜合評(píng)價(jià)法相結(jié)合的評(píng)價(jià)方法。第四章評(píng)價(jià)指標(biāo)體系的設(shè)計(jì)和權(quán)重的確立。本章構(gòu)建了DST公司E-Learning系統(tǒng)效果評(píng)價(jià)體系的理論模型,具體的操作步驟是：通過(guò)合理的利用德?tīng)柗品?，全面的采集專家們的意?jiàn)，充分的考慮出影響到系統(tǒng)運(yùn)行的各項(xiàng)因素，綜合制定出評(píng)價(jià)指標(biāo)集合。結(jié)合層次分析法中的1-9標(biāo)度原則，對(duì)指標(biāo)進(jìn)行分層歸類，利用層次分析法合理的確定出各個(gè)評(píng)價(jià)指標(biāo)的權(quán)重。通過(guò)對(duì)權(quán)重分配狀況的確認(rèn)，可以為企業(yè)在進(jìn)行后續(xù)改善的時(shí)候轉(zhuǎn)移工作重心分配時(shí)提供必要的參考。第五章系統(tǒng)的綜合評(píng)價(jià)。本章詳細(xì)闡述了問(wèn)卷的設(shè)計(jì)與實(shí)施過(guò)程，在收集到學(xué)員的意見(jiàn)進(jìn)行匯總的基礎(chǔ)上,以模糊綜合評(píng)價(jià)法進(jìn)行相應(yīng)的數(shù)學(xué)建模，并完成數(shù)學(xué)模型的解答，根據(jù)最大隸屬度的原則，確定出整體系統(tǒng)的整體評(píng)價(jià)結(jié)果。第七章結(jié)論和后續(xù)的研究方向。通過(guò)對(duì)DST公司E-Learning系統(tǒng)效果的科學(xué)評(píng)價(jià)，可以得出對(duì)DST公司E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)體系的整體評(píng)價(jià)，針對(duì)模糊綜合評(píng)價(jià)法的缺陷，認(rèn)識(shí)出研究的不足，為后續(xù)研究提供了方向。第二章：2.1行業(yè)背景介紹伴隨著人類文明的發(fā)展，人類科技水平也在不斷的向前進(jìn)步。英國(guó)18世紀(jì)開(kāi)始的工業(yè)革命拉開(kāi)了世界工業(yè)化進(jìn)程的序幕，標(biāo)志著人類社會(huì)從此已經(jīng)進(jìn)入了工業(yè)化社會(huì)。進(jìn)入20世紀(jì)以來(lái)，工業(yè)化開(kāi)始迅速發(fā)展，世界經(jīng)濟(jì)規(guī)模得到了極大的提高。特別是20世紀(jì)末期開(kāi)始的全球一體化的迅速發(fā)展，很大程度的改變了全球政治、經(jīng)濟(jì)的運(yùn)行方式，極大程度的促進(jìn)了世界經(jīng)濟(jì)的蓬勃穩(wěn)固發(fā)展。與此同時(shí)，為了適應(yīng)工業(yè)大生產(chǎn)的快節(jié)奏以及確保產(chǎn)品品質(zhì)的統(tǒng)一性和穩(wěn)定性，各類智能自動(dòng)化的流水線應(yīng)運(yùn)而生，為了完善流水線的設(shè)置和減少人力的同時(shí)增加產(chǎn)業(yè)能力，大量的自動(dòng)化產(chǎn)品被研發(fā)和安裝到生產(chǎn)車(chē)間。自動(dòng)化技術(shù)廣泛用于工業(yè)、農(nóng)業(yè)、軍事、科學(xué)研究、交通運(yùn)輸、商業(yè)、醫(yī)療、服務(wù)和家庭等方面。采用自動(dòng)化技術(shù)不僅可以把人從繁重的體力勞動(dòng)、部分腦力勞動(dòng)以及惡劣、危險(xiǎn)的工作環(huán)境中解放出來(lái)，而且能擴(kuò)展人的器官功能，極大地提高勞動(dòng)生產(chǎn)率，增強(qiáng)人類認(rèn)識(shí)世界和改造世界的能力，因此，制造裝備的自動(dòng)化程度是工業(yè)、農(nóng)業(yè)、國(guó)防和科學(xué)技術(shù)現(xiàn)代化的重要條件和顯著標(biāo)志。我國(guó)的現(xiàn)代自動(dòng)化進(jìn)程可以追溯到1957年成立的自動(dòng)化學(xué)會(huì)籌備委員會(huì)，以來(lái)，工業(yè)產(chǎn)業(yè)的自動(dòng)化進(jìn)程已經(jīng)延續(xù)了近60年，由于常年的戰(zhàn)亂以及收到當(dāng)時(shí)科技水平的限制，我國(guó)的自動(dòng)化進(jìn)程在前期主要依賴蘇聯(lián)的技術(shù)援助，二十世紀(jì)五十年代開(kāi)始大量二戰(zhàn)期間留學(xué)美國(guó)的專家學(xué)者歸國(guó)，又將歐洲和美國(guó)的控制理念帶回中國(guó)，基于以上兩個(gè)特殊的歷史背景原因，我國(guó)自動(dòng)化產(chǎn)業(yè)在學(xué)術(shù)和應(yīng)用上同時(shí)沿襲美國(guó)和蘇聯(lián)的模式，一直以來(lái)都沒(méi)有形成自己的總線控制協(xié)議。作為最具發(fā)展?jié)摿Φ漠a(chǎn)業(yè)之一,近幾年我國(guó)工業(yè)自動(dòng)化行業(yè)一直以驚人的速度在發(fā)展。自1998年起,整個(gè)工業(yè)控制自動(dòng)化市場(chǎng)的平均增長(zhǎng)率保持在30%以上,PLC的增長(zhǎng)速度更是高達(dá)50%。近兩年,西門(mén)子、ABB、松下、施耐德等幾主要品牌的產(chǎn)值增長(zhǎng)率都超過(guò)了10%。在2015年,整個(gè)工業(yè)自動(dòng)化行業(yè)的增長(zhǎng)都超過(guò)了15%的增長(zhǎng),富士等新進(jìn)入者的增幅都在50%以上。[注]此數(shù)據(jù)來(lái)源于2016年變頻器行業(yè)分析報(bào)告和中國(guó)變頻器行業(yè)發(fā)展調(diào)研與市場(chǎng)前景分析報(bào)告(2016版)1980年以后，伴隨著改革開(kāi)放的腳步，大量的自動(dòng)化公司攜產(chǎn)品搶灘中國(guó)市場(chǎng)，隨之而來(lái)的是各種協(xié)議的約束，不同公司的產(chǎn)品采用不同方式的控制協(xié)議，給自動(dòng)化產(chǎn)品的通用性帶來(lái)了極大的困難，同時(shí)由于掌握每種協(xié)議所需要學(xué)習(xí)的時(shí)間較長(zhǎng)，對(duì)圖紙?jiān)O(shè)計(jì)和對(duì)從業(yè)人員的專業(yè)性要求更為嚴(yán)格，伴隨著市場(chǎng)競(jìng)爭(zhēng)的日益嚴(yán)峻，在各個(gè)自動(dòng)化產(chǎn)品公司，技術(shù)人員掌握兩種以上的協(xié)議和相關(guān)控制方法，已經(jīng)成為從業(yè)人員的必備技能。目前國(guó)內(nèi)自動(dòng)化從業(yè)人員的層次構(gòu)成主要如下幾類:A：由生產(chǎn)廠家培訓(xùn)的技術(shù)人員，掌握單一的或者競(jìng)爭(zhēng)公司的產(chǎn)品技術(shù)，單一品牌的技術(shù)水平較高，對(duì)于主要競(jìng)爭(zhēng)對(duì)手的產(chǎn)品的技術(shù)也有一定程度的把握，但是對(duì)于不同品牌之間的搭配與成套裝備的設(shè)計(jì)，存在技術(shù)缺陷，無(wú)法單人完成技術(shù)設(shè)計(jì)。B：裝備制造廠家的設(shè)計(jì)技術(shù)人員，掌握主流大部分產(chǎn)品的控制技術(shù)，單一品牌產(chǎn)品的技術(shù)水平較低，但是掌握不同品牌混合使用的技術(shù)，在廠商技術(shù)人員的指導(dǎo)下，有能力設(shè)計(jì)出混合使用不同品牌自動(dòng)化產(chǎn)品的設(shè)備。C：各品牌代理商和分銷商的技術(shù)人員，對(duì)單一產(chǎn)品的技術(shù)水平處于中游水平，技術(shù)支持和上門(mén)服務(wù)主要依賴廠家技術(shù)人員的電話或者郵件支持，但是現(xiàn)場(chǎng)經(jīng)驗(yàn)比較豐富，能夠在短時(shí)間內(nèi)發(fā)現(xiàn)技術(shù)問(wèn)題。雖然基于集團(tuán)整體利益和更好的控制市場(chǎng)銷售狀態(tài)等多方面的考慮，各個(gè)品牌的廠家都將代理機(jī)制定格為區(qū)域代理，并且嚴(yán)格禁止跨區(qū)域的銷售和服務(wù)，但是由于各個(gè)代理店的主要客戶集中在設(shè)備商和中間商，設(shè)備商和中間商的銷售范圍比較廣泛，這就導(dǎo)致了無(wú)論廠家還是代理商還是設(shè)備制造商的工程師的服務(wù)覆蓋范圍比較廣泛。隨著經(jīng)濟(jì)體系全球化的不斷擴(kuò)大，在廣大自動(dòng)化行業(yè)工程師的職業(yè)生涯中，長(zhǎng)期的出差已經(jīng)成為一種常態(tài)，因此從業(yè)工程師的地域歸屬感不強(qiáng)，跨區(qū)域跨城市的移動(dòng)性較大，這直接導(dǎo)致整個(gè)行業(yè)人員的流動(dòng)性相對(duì)較高。2.2公司背景作為DST公司的母公司，三菱電機(jī)株式會(huì)社的發(fā)展歷程就是現(xiàn)代日本工業(yè)的發(fā)展史。公司成立于1921年，契機(jī)是當(dāng)時(shí)三菱造船公司（即現(xiàn)在的三菱重工業(yè)株式會(huì)社）將位于日本神戶的一家分廠從脫離出去，組建成為一家名為三菱電機(jī)株式會(huì)社的新公司，專門(mén)為遠(yuǎn)洋船舶制造電動(dòng)機(jī)和配套電氣產(chǎn)品。在同一年，三菱電機(jī)株式會(huì)社開(kāi)始了電風(fēng)扇的生產(chǎn)和銷售，從而進(jìn)軍消費(fèi)品市場(chǎng)，電風(fēng)扇產(chǎn)品在日本的熱銷，為三菱電機(jī)株式會(huì)社的發(fā)展奠定了堅(jiān)實(shí)的基礎(chǔ)。在隨后的十年間，在各關(guān)系會(huì)社的提攜下，成功簽下了多個(gè)重要合同，包括大功率的電動(dòng)機(jī)設(shè)計(jì)制造和開(kāi)發(fā)電氣鐵路變電站的合同。到了20世紀(jì)30年代，三菱電機(jī)開(kāi)始生產(chǎn)、安裝和維護(hù)電梯和自動(dòng)扶梯，同時(shí)開(kāi)始生產(chǎn)發(fā)電設(shè)備。技術(shù)能力在較短時(shí)間得到了迅速的積累和提升。1945年后，伴隨著日本戰(zhàn)后重建，三菱電機(jī)公司以驚人的速度發(fā)展壯大，在20世紀(jì)60年代已經(jīng)成為日本最具創(chuàng)新精神的多元化電子設(shè)備制造商之一。在隨后的20年間里，三菱電機(jī)不短開(kāi)始擴(kuò)張海外業(yè)務(wù)，將自身樹(shù)立為多個(gè)行業(yè)的發(fā)展先行者，包括工業(yè)控制、計(jì)算機(jī)、先進(jìn)空調(diào)系統(tǒng)、汽車(chē)電子、衛(wèi)星與核能發(fā)電。從20世紀(jì)80年代至今，三菱電機(jī)始終以驚人的速度推出和完善突破性的技術(shù)和產(chǎn)品，造福整個(gè)社會(huì)、行業(yè)和個(gè)人。如今，三菱電機(jī)已然成為全球巨頭，在40個(gè)國(guó)家/地區(qū)經(jīng)營(yíng)業(yè)務(wù)，擁有超過(guò)12萬(wàn)名員工，綜合凈銷售額超過(guò)4兆3,943億日元。（數(shù)據(jù)源自三菱電機(jī)株式會(huì)社2016年CSR年報(bào)http://www.mitsubishielectric.co.jp/corporate/csr/backnumber/pdf/2016/csr_r2016.pdf）三菱電機(jī)在自動(dòng)化行業(yè)作為世界領(lǐng)先品牌企業(yè)之一，其產(chǎn)品和系統(tǒng)在眾多領(lǐng)域和應(yīng)用場(chǎng)合中得到廣泛使用。作為日系工業(yè)自動(dòng)化品牌的領(lǐng)軍企業(yè)，三菱電機(jī)的自動(dòng)化產(chǎn)品在日本的市場(chǎng)占有率為50%左右。三菱電機(jī)的中國(guó)業(yè)務(wù)，最早可以追溯到1978年，當(dāng)時(shí)的三菱電機(jī)聯(lián)合三菱商事和三菱重工一起為寶山制鐵制造發(fā)電機(jī)設(shè)備，此后先后接受到了空調(diào)機(jī)和電梯的業(yè)務(wù)訂單，1981年和1985年先后開(kāi)設(shè)駐北京事務(wù)所和駐上海事務(wù)所，隨后隨著中國(guó)市場(chǎng)的業(yè)務(wù)擴(kuò)展，三菱電機(jī)集團(tuán)于1986年與上海機(jī)電股份有限公司及中國(guó)機(jī)械進(jìn)出口（集團(tuán)）有限公司合資成立股份公司（上海三菱電梯有限公司），開(kāi)展電梯制造和銷售業(yè)務(wù)。為了更好的銷售和推廣三菱電機(jī)的自動(dòng)化產(chǎn)品，同時(shí)也為了縮短中國(guó)市場(chǎng)客戶的維修和技術(shù)指導(dǎo)周期，三菱電機(jī)集團(tuán)于1993年成立中國(guó)全資分公司DST，公司業(yè)務(wù)內(nèi)容非常復(fù)雜，具體表現(xiàn)為：1、自動(dòng)化產(chǎn)品的設(shè)計(jì)與制造（涉及到工業(yè)斷路器、數(shù)控系統(tǒng)、變頻器、觸摸屏、伺服電機(jī)系統(tǒng)、PLC等）2、銷售和售前售后服務(wù)(具體業(yè)務(wù)體現(xiàn)為：產(chǎn)品的售前指導(dǎo)、使用中技術(shù)支持、售后服務(wù))3、售后零配件進(jìn)出口業(yè)務(wù)4、從業(yè)人員的技術(shù)培訓(xùn)等。[注]摘自三菱電機(jī)官方網(wǎng)站。目前經(jīng)由DST生產(chǎn)和銷售的三菱電機(jī)集團(tuán)的自動(dòng)化產(chǎn)品占據(jù)中國(guó)自動(dòng)化市場(chǎng)的份額在7%左右，市場(chǎng)排名在前三名的位置。[注]此數(shù)據(jù)來(lái)源于2016年變頻器行業(yè)分析報(bào)告和中國(guó)變頻器行業(yè)發(fā)展調(diào)研與市場(chǎng)前景分析報(bào)告(2016版)2.3問(wèn)題的提出世界經(jīng)濟(jì)的快速發(fā)展，也反映了企業(yè)的發(fā)展。特別是跨國(guó)公司的出現(xiàn)又極大地推動(dòng)了世界經(jīng)濟(jì)的前進(jìn)。而隨著科學(xué)管理理論、組織管理理論、行為管理理論及各種現(xiàn)代管理理論的產(chǎn)生，企業(yè)管理的各種思想、方法等越來(lái)越科學(xué)規(guī)范，也促進(jìn)了全球企業(yè)的發(fā)展。正是經(jīng)濟(jì)與企業(yè)的快速發(fā)展，企業(yè)間的競(jìng)爭(zhēng)也越來(lái)越激烈。特別是20世紀(jì)90年代以來(lái)，企業(yè)對(duì)人才資源的競(jìng)爭(zhēng)尤為明顯?；蛘哒f(shuō)，當(dāng)今世界的企業(yè)競(jìng)爭(zhēng)，說(shuō)到底是人才的競(jìng)爭(zhēng)。企業(yè)要想取得可持續(xù)競(jìng)爭(zhēng)優(yōu)勢(shì)，就必須依靠人才來(lái)維持和培育競(jìng)爭(zhēng)力?；诠疽?guī)模和產(chǎn)品技術(shù)水平處于行業(yè)上游的原因，國(guó)內(nèi)以及國(guó)外自動(dòng)化行業(yè)中的公司對(duì)于DST公司的工程師和技術(shù)人員比較青睞，自2005開(kāi)始專業(yè)人員的流失成為DST公司經(jīng)常面對(duì)的問(wèn)題，隨著人員的流失，后續(xù)而來(lái)的新人招聘、培訓(xùn)成本等問(wèn)題所涉及到的費(fèi)用占了人事費(fèi)用很大的比重。為了彌補(bǔ)人員流失帶來(lái)的培訓(xùn)滯后等問(wèn)題，公司于2007年及時(shí)引入E-Learning系統(tǒng)，來(lái)完成新晉員工的初期培訓(xùn)工作，但是由于缺失相關(guān)的評(píng)價(jià)和考核系統(tǒng)，對(duì)于新員工的培訓(xùn)效果的評(píng)價(jià)以及業(yè)務(wù)掌握能力的判斷一直沒(méi)有很好的解決方法。而對(duì)外培訓(xùn)時(shí)，經(jīng)常出現(xiàn)學(xué)習(xí)人員在結(jié)業(yè)測(cè)試時(shí)。表現(xiàn)較好，但是實(shí)際應(yīng)用或者解決后續(xù)問(wèn)題時(shí)，經(jīng)常出現(xiàn)技術(shù)能力不足，后續(xù)問(wèn)題很多，DST公司的培訓(xùn)業(yè)務(wù)分為對(duì)內(nèi)培訓(xùn)和對(duì)外培訓(xùn)兩個(gè)方面，按照授課方式主要分為面對(duì)面教學(xué)和E-Learning在線培訓(xùn)，其中E-Learning培訓(xùn)方式由于不受時(shí)間和地域的限制，以及豐富的課程內(nèi)容，備受行業(yè)內(nèi)人士推崇，深受好評(píng)。但是由于行業(yè)秩序的混亂，從業(yè)人員流動(dòng)性大，以及作業(yè)環(huán)境惡劣，導(dǎo)致涉業(yè)人員素質(zhì)相對(duì)較差，而且大量公司都是外資獨(dú)資公司，對(duì)員工要求較為嚴(yán)格，各公司經(jīng)常出現(xiàn)人員離職后相關(guān)業(yè)務(wù)需要重新培訓(xùn)的窘境，公司管理層雖然發(fā)現(xiàn)該問(wèn)題但是一直沒(méi)有找到適當(dāng)?shù)奶幚矸椒?，縱觀行業(yè)內(nèi)部，通常采用退職人員工作辦理交接結(jié)束后才結(jié)算薪酬的方式，但是效果并不明顯。大量退職人員的離開(kāi)，帶走的不僅僅是技術(shù)的積累，客戶資源的同時(shí)流失也是這個(gè)行業(yè)必須經(jīng)歷的的痛苦歷程，所以，如何減少因?yàn)槿藛T流動(dòng)造成的知識(shí)損失和減少重復(fù)的培訓(xùn)成本，成為困擾各個(gè)自動(dòng)化行業(yè)公司的首要問(wèn)題，于是大部分自動(dòng)化公司都引入了E-Learning系統(tǒng)，但是對(duì)系統(tǒng)的檢驗(yàn)和學(xué)習(xí)效果的評(píng)價(jià)，以及平臺(tái)背后的大數(shù)據(jù)處理都處于盲區(qū)。當(dāng)前企業(yè)采用現(xiàn)代化的E-Learning系統(tǒng)對(duì)員工進(jìn)行培訓(xùn)，有效地實(shí)現(xiàn)了從業(yè)人員接受校園外的繼續(xù)教育，為構(gòu)建學(xué)習(xí)型組織、培養(yǎng)員工具備終身學(xué)習(xí)的素質(zhì)，構(gòu)建了一個(gè)高效的網(wǎng)絡(luò)平臺(tái)。但是，從調(diào)查中也還反映了E-Learning培訓(xùn)系統(tǒng)本身還存在的一些有待完善的問(wèn)題，如學(xué)習(xí)資源的呈現(xiàn)方式、培訓(xùn)系統(tǒng)的個(gè)性化體現(xiàn)、學(xué)習(xí)導(dǎo)航的設(shè)置等方面。因此，我們還需要依托多媒體技術(shù)和人工智能技術(shù)，更好地強(qiáng)化學(xué)習(xí)資源的多樣性呈現(xiàn)、學(xué)習(xí)過(guò)程的智能化學(xué)習(xí)路徑導(dǎo)航和實(shí)現(xiàn)培訓(xùn)方式的個(gè)性化；利用網(wǎng)絡(luò)技術(shù)，不斷地提高學(xué)習(xí)資源瀏覽和檢索的速度，提升E-Learning系統(tǒng)運(yùn)行的可靠性、可維護(hù)性。另外，人力資源部門(mén)還應(yīng)不斷地完善人力資源的培訓(xùn)制度、考核制度，以保障和發(fā)揮E-Learning系統(tǒng)在企業(yè)培訓(xùn)中的重要作用，使其成為打造企業(yè)核心競(jìng)爭(zhēng)力的有效武器。對(duì)于企業(yè)來(lái)說(shuō)，企業(yè)實(shí)施E-Learning系統(tǒng)是以提高企業(yè)的知識(shí)管理水平和組織知識(shí)管理績(jī)效為目的的，以求在激烈競(jìng)爭(zhēng)的市場(chǎng)環(huán)境中利用企業(yè)所擁有的知識(shí)和較高的員工技術(shù)水平為企業(yè)創(chuàng)造競(jìng)爭(zhēng)優(yōu)勢(shì)和持續(xù)競(jìng)爭(zhēng)優(yōu)勢(shì)，進(jìn)而謀求組織的長(zhǎng)遠(yuǎn)發(fā)展。然而，由于受到各種各樣原因的影響，不少企業(yè)雖然構(gòu)建了E-Learning系統(tǒng)，但卻往往沒(méi)有收到預(yù)期的效果。而企業(yè)對(duì)于E-Learning系統(tǒng)培訓(xùn)效果的評(píng)價(jià)往往并沒(méi)有足夠重視，在本文中，筆者試圖從一個(gè)研究者的角度，對(duì)DST公司的E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)體系進(jìn)行研究，以期得出科學(xué)客觀的評(píng)價(jià)結(jié)論和有可操作性的改善意見(jiàn)。第三章：評(píng)價(jià)理論基礎(chǔ)及相關(guān)文獻(xiàn)綜述在確定評(píng)價(jià)指標(biāo)和建立評(píng)價(jià)體系這個(gè)問(wèn)題上，國(guó)內(nèi)外專家學(xué)者，采取了大量的方法進(jìn)行理論和實(shí)踐的探討和論證，比較常見(jiàn)的手法主要有：專家意見(jiàn)法，運(yùn)用德?tīng)柗?Delphi)法、層次分析(APH)法、等級(jí)相關(guān)分析、指標(biāo)聚類分析、分層矩陣加權(quán)法、典型指標(biāo)乘積總分,分析和研究確立人才評(píng)價(jià)指標(biāo)體系中有代表性的典型指標(biāo)及其人才評(píng)價(jià)方法。以下著重對(duì)本研究所采用的手法進(jìn)行細(xì)致的介紹：3.1Delphi法德?tīng)柗品ㄗ钤缡窃?0世紀(jì)40年代由赫爾默(Helmer)和戈登(Gordon)共同提出，最初用于科技領(lǐng)域，在不見(jiàn)面的前提條件下匿名收集專家的直觀意見(jiàn)和經(jīng)驗(yàn)判斷，進(jìn)行有組織性的意見(jiàn)歸納，進(jìn)而對(duì)技術(shù)革新和社會(huì)變動(dòng)等相關(guān)的預(yù)測(cè)的進(jìn)行定性調(diào)查。3.1.1名稱來(lái)源德?tīng)柗剖枪畔ＥD的一個(gè)地名。傳說(shuō)太陽(yáng)神阿波羅曾經(jīng)在德?tīng)柗茪⑺懒艘粭l巨蟒，因此成為德?tīng)柗浦氐闹魅恕Ｔ诘聽(tīng)柗朴幸蛔⒉_神殿，傳說(shuō)是一個(gè)神諭之地，可以預(yù)卜未來(lái)。因?yàn)榈聽(tīng)柗品ㄍ瑯訐碛休^為準(zhǔn)確的預(yù)測(cè)性，所以人們便使用德?tīng)柗七@個(gè)地名來(lái)命名這種預(yù)測(cè)方法。3.1.2德?tīng)柗品ǖ陌l(fā)展過(guò)程1946年，出于對(duì)當(dāng)時(shí)世界局勢(shì)的前端考量，美國(guó)空軍專家開(kāi)始研究蘇聯(lián)的軍事戰(zhàn)略，美國(guó)著名軍事智庫(kù)蘭德公司受委托為美國(guó)空軍“德?tīng)柗朴?jì)劃”進(jìn)行預(yù)測(cè)時(shí)，為避免專家會(huì)議討論時(shí)存在的屈從于權(quán)威或少數(shù)容易盲目服從多數(shù)的缺點(diǎn)，首次采用這種方法進(jìn)行定性預(yù)測(cè)。德?tīng)柗朴?jì)劃的主要研究?jī)?nèi)容是:“從一個(gè)蘇聯(lián)戰(zhàn)略計(jì)劃者的觀點(diǎn)看,應(yīng)如何選擇美國(guó)工業(yè)體系中的最佳轟炸目標(biāo),并且估計(jì)出,使美國(guó)工業(yè)產(chǎn)量減少到預(yù)定的數(shù)量時(shí)所必須的原子彈數(shù)目?！痹?0年代初期,如果使用其它方法對(duì)該問(wèn)題進(jìn)行預(yù)測(cè)需要花費(fèi)大量的時(shí)間、經(jīng)歷和資金來(lái)收集基礎(chǔ)資料,同時(shí)還需要編寫(xiě)極其復(fù)雜的計(jì)算機(jī)程序,用以建立龐大的數(shù)學(xué)模型,這幾乎是當(dāng)時(shí)的電子計(jì)算機(jī)所難以勝任的。即使使用了電子計(jì)算機(jī),仍然需要對(duì)蘇聯(lián)的政策和諜報(bào)工作作出許多主觀估計(jì),這些主觀估計(jì)對(duì)預(yù)測(cè)結(jié)果有舉足輕重的影響，伴隨著這些影響，預(yù)測(cè)的準(zhǔn)確性和及時(shí)性不能得到很好的保證。在這種情況下,采用德?tīng)柗?Delphi)法則可以進(jìn)行代價(jià)小而可靠性較高的預(yù)測(cè)。德?tīng)柗品ǖ玫窖杆侔l(fā)展的契機(jī)是20世紀(jì)中期，在當(dāng)時(shí)美國(guó)的杜魯門(mén)政府執(zhí)意發(fā)動(dòng)朝鮮戰(zhàn)爭(zhēng)的時(shí)候，蘭德公司提交了一份使用德?tīng)柗品ㄗ龀龅念A(yù)測(cè)性報(bào)告，提前告知美國(guó)政府在這場(chǎng)戰(zhàn)爭(zhēng)中失敗概率較大。但是杜魯門(mén)政府并沒(méi)有采納，結(jié)果朝鮮戰(zhàn)爭(zhēng)聯(lián)合國(guó)軍隊(duì)非但沒(méi)有完成預(yù)期目標(biāo)，而且直接損失也遠(yuǎn)遠(yuǎn)超出最初預(yù)期，美國(guó)經(jīng)濟(jì)也因此受到很大程度的影響。自此以后，德?tīng)柗品ǖ玫搅藦V泛的認(rèn)可。后來(lái)逐漸被擴(kuò)展應(yīng)用于任何需要主觀判斷的預(yù)測(cè)場(chǎng)合，如軍事后果預(yù)測(cè)、人口增長(zhǎng)性預(yù)測(cè)、醫(yī)療保健預(yù)測(cè)、經(jīng)營(yíng)和需求預(yù)測(cè)、教育預(yù)測(cè)等。此外，還被大量企業(yè)用來(lái)進(jìn)行企業(yè)戰(zhàn)略評(píng)價(jià)、決策、管理溝通和規(guī)劃工作等。[注]出處是DalkeyN,BrownB,CochranS.TheDelphiMethod,III:UseofSelfRatingstoImproveGroupEstimates.SantaMonica,Calif:RandCorp;November1969.PublicationRM-6115-PR.3.1.3德?tīng)柗品ǖ脑硗ǔＧ闆r下，在索取專家意見(jiàn)時(shí)，為了統(tǒng)一專家的意見(jiàn)，通常會(huì)召開(kāi)審議會(huì)或者討論會(huì)，使用這些方法經(jīng)常受到「對(duì)小組的優(yōu)勢(shì)者和權(quán)威者、聲音的大的人、不一樣的意見(jiàn)是不是叫對(duì)方難堪」等的影響。德?tīng)柗品ㄊ菫榱丝朔＜視?huì)議法的缺點(diǎn)而產(chǎn)生的一種專家預(yù)測(cè)方法。其核心是通過(guò)匿名方式經(jīng)過(guò)有控制的幾輪函詢征求專家意見(jiàn),在預(yù)測(cè)過(guò)程中，研究者使用匿名函征的方式向?qū)＜覀冊(cè)儐?wèn)和收集相關(guān)意見(jiàn)，進(jìn)而得到“重復(fù)和被控制的反饋”，然后對(duì)每輪專家意見(jiàn)進(jìn)行匯總整理，將其作為參考資料再寄發(fā)給每位專家,供專家們分析判斷,提出新的意見(jiàn),重復(fù)這個(gè)過(guò)程，最終使專家意見(jiàn)趨于一致,得到較一致、可靠的評(píng)價(jià)指標(biāo)。簡(jiǎn)單來(lái)講，德?tīng)柗品梢钥醋魇菍＜乙庖?jiàn)法的一個(gè)改良版本。它取消了需要見(jiàn)面博弈的專家討論會(huì)，取而代之的是采用匿名函征的方式采集意見(jiàn)，這樣的話即使存在師徒關(guān)系和朋友關(guān)系這樣的問(wèn)題也不會(huì)影響到意見(jiàn)的統(tǒng)一，克服了在專家會(huì)議法中經(jīng)常發(fā)生的專家們不能充分發(fā)表意見(jiàn)、權(quán)威人物的意見(jiàn)左右其他人的意見(jiàn)等弊病。各位專家能真正充分地發(fā)表自己的預(yù)測(cè)意見(jiàn)。[注]出處日本維基百科3.1.4德?tīng)柗品ㄊ褂梅椒ㄔ谑褂玫聽(tīng)柗品ㄟM(jìn)行時(shí)，應(yīng)該首先需要確定要預(yù)測(cè)或者要確立的主題及內(nèi)容，然后根據(jù)該主題作成第一輪德?tīng)柗品ㄕ{(diào)查票。這個(gè)調(diào)查票可以是投票方式也可以使問(wèn)卷形式，最終的目的是為了迅速和準(zhǔn)確的得到專家的反饋意見(jiàn)。然后需要選定德?tīng)柗品▍⒓拥膶＜?，研究者選定的專家的管理經(jīng)驗(yàn)或者從也經(jīng)驗(yàn)必須豐富，在這個(gè)領(lǐng)域的必須有較高的權(quán)威性，以便保證預(yù)測(cè)結(jié)果的準(zhǔn)確性，對(duì)于從事過(guò)相關(guān)理論研究和教學(xué)的高校教授等也會(huì)被列入被考量在范圍內(nèi)，通過(guò)郵件或者電話溝通初步確定參加人員名單，對(duì)名單進(jìn)行甄選和合理的分配，最終選定適合參與德?tīng)柗品A(yù)測(cè)的專家。第三，開(kāi)始對(duì)專家們進(jìn)行意見(jiàn)的函征，此過(guò)程要求對(duì)專家、學(xué)者們進(jìn)行詳細(xì)的征求意見(jiàn)。將得到的回答進(jìn)行統(tǒng)計(jì)、匯總，形成整體意見(jiàn)匯總表，總結(jié)出存在的問(wèn)題以及各專家的意見(jiàn)沖突，要求參與的專家們重新進(jìn)行考慮。然后將這些問(wèn)題和反饋意見(jiàn)、以及意見(jiàn)的重新考慮過(guò)程，重新匯總，再將重復(fù)意見(jiàn)劃定就在一定的范圍內(nèi)，再次發(fā)送給參與的專家們。然后重復(fù)上述過(guò)程，指導(dǎo)得出專家意見(jiàn)趨于一致,得到較一致、可靠的評(píng)價(jià)指標(biāo)。最后，對(duì)上述意見(jiàn)或者指標(biāo)，按照研究的思路，進(jìn)行專家打分法或者采用AHP分析等手法進(jìn)行數(shù)學(xué)建模計(jì)算，得出相應(yīng)的權(quán)重。對(duì)于學(xué)習(xí)效果評(píng)價(jià)這類目前尚無(wú)較為公認(rèn)的定義及成熟的評(píng)價(jià)指標(biāo)的研究來(lái)說(shuō),運(yùn)用德?tīng)柗?Delphi)法,廣泛聽(tīng)取和借鑒相關(guān)領(lǐng)域?qū)＜业囊庖?jiàn)與建議,可以減少評(píng)價(jià)的主觀性、片面性,能夠更加全面、客觀、科學(xué)、高效的到達(dá)研究目的。3.2層次分析法層次分析法是一種定性與定量分析相結(jié)合的多準(zhǔn)則決策方法。這一方法首先對(duì)復(fù)雜的問(wèn)題層次化，將各元素進(jìn)行分類，相同屬性元素組成一組，按照不同組構(gòu)建不同層次，形成遞階層次機(jī)構(gòu)。3.2.1層次分析法的起源和應(yīng)用領(lǐng)域?qū)哟畏治龇ǎˋnalyticHierarchyProcesss：簡(jiǎn)稱AHP），1971年最早由由美國(guó)運(yùn)籌學(xué)家\o"托馬斯·塞蒂"托馬斯·塞蒂（ThomasL.Saaty）正式提出，是一種定性和定量相結(jié)合的、系統(tǒng)化、層次化的分析手法，層次分析法為分析相互關(guān)聯(lián)和相互制約的復(fù)雜問(wèn)題提供了一個(gè)一種簡(jiǎn)單實(shí)用的方法。在沒(méi)有評(píng)價(jià)標(biāo)準(zhǔn)的、需要進(jìn)行主觀判斷的等場(chǎng)合使用層次分析法會(huì)是非常有效的和迅速的。由于它在處理復(fù)雜的\o"決策"決策問(wèn)題上的實(shí)用性和有效性，很快在世界范圍得到重視。最初于現(xiàn)代商業(yè)中各種各樣的意志決定和公共事業(yè)的意見(jiàn)統(tǒng)一等場(chǎng)合中得以應(yīng)用。目前層次分析法在經(jīng)濟(jì)\o"計(jì)劃"計(jì)劃和\o"管理"管理、\o"能源政策"能源政策和分配、\o"行為科學(xué)"行為科學(xué)、軍事指揮、運(yùn)輸、農(nóng)業(yè)、教育、人才、醫(yī)療和環(huán)境等領(lǐng)域的需要用主觀意思進(jìn)行決定的場(chǎng)合中，都得到了廣泛的應(yīng)用。通過(guò)使用層次分析法，可以將人類的主觀性、感覺(jué)性的判斷模型化，通過(guò)建模后進(jìn)行相關(guān)計(jì)算，得出相對(duì)理性和數(shù)據(jù)化的結(jié)果。這一點(diǎn)相對(duì)其他主觀判斷方法來(lái)說(shuō)要準(zhǔn)確很多。3.2.2層次分析法的原理和構(gòu)成層次分析法的主要原理就是通過(guò)分析復(fù)雜系統(tǒng)的有關(guān)要素及其相互間的關(guān)系，簡(jiǎn)化為有序的遞階式層次結(jié)構(gòu)，并將要研究的各類要素，分歸成不同的層次，最終形成一個(gè)多層次的分析結(jié)構(gòu)模型，最終把系統(tǒng)分析的形式歸結(jié)成最低層（供決策的實(shí)施方案或者措施等）相對(duì)最高層（總目標(biāo)或總指標(biāo)）的相對(duì)重要性權(quán)值的確立問(wèn)題，即將相對(duì)復(fù)雜的關(guān)系結(jié)構(gòu)，轉(zhuǎn)化為可以確立權(quán)值的數(shù)學(xué)結(jié)構(gòu)模型。AHP的構(gòu)成主要是代表所要達(dá)到目標(biāo)的最高層、代表為實(shí)現(xiàn)目標(biāo)所做決策和約束的中間層，以及代表實(shí)際解決問(wèn)題的最低層。在討論問(wèn)題時(shí)，需要進(jìn)行構(gòu)造的相應(yīng)的層次框架，分析問(wèn)題中含有的各個(gè)因素，將要素的評(píng)價(jià)進(jìn)行數(shù)量化。層次被構(gòu)建之后，決定者需要對(duì)系統(tǒng)各因素的相互關(guān)系和重要性質(zhì)進(jìn)行兩兩比較。在比較時(shí)，決策者可以對(duì)要素具體的數(shù)據(jù)進(jìn)行對(duì)比，也可以判斷因素之間的相對(duì)意義和重要性。這樣，不僅僅是客觀的信息和數(shù)據(jù)，主觀的人的判斷和評(píng)價(jià)可以體現(xiàn)出來(lái)。對(duì)于AHP的要素比較，需要將上述因素所得的評(píng)價(jià)或者數(shù)據(jù)在全體因素中進(jìn)行數(shù)量化。實(shí)際操作時(shí)，把各個(gè)層次中的各個(gè)要素的重要度或優(yōu)先度按照同一標(biāo)準(zhǔn)進(jìn)行衡量，對(duì)各個(gè)因素的按照重要度和優(yōu)先度分配出具體的數(shù)值，在賦值時(shí)，需要用到的時(shí)Saaty1-9標(biāo)度法，關(guān)于Saaty1-9標(biāo)度法的介紹將在下一節(jié)進(jìn)行。[注]此處出自Saaty,ThomasL.(2008-06).“RelativeMeasurementanditsGeneralizationinDecisionMaking:WhyPairwiseComparisonsareCentralinMathematicsfortheMeasurementofIntangibleFactors-TheAnalyticHierarchy/NetworkProcess”.RACSAM(ReviewoftheRoyalSpanishAcademyofSciences,SeriesA,Mathematics)102(2):251–3183.2.3使用AHP的方法運(yùn)用AHP分析問(wèn)題大體要經(jīng)過(guò)以下五個(gè)步驟：(1)建立系統(tǒng)的遞階層次結(jié)構(gòu)模型；(2)構(gòu)造兩兩比較判斷矩陣；(3)層次單排序；(4)層次總排序；(5)一致性檢驗(yàn)。1、建立系統(tǒng)的遞階層次結(jié)構(gòu)模型對(duì)于要決策的問(wèn)題，通?？梢詫⑵鋭澐殖蓪哟谓Y(jié)構(gòu)模型。將要決定的問(wèn)題進(jìn)行模型化，在這個(gè)層次上，建立一個(gè)要達(dá)到的目標(biāo)，然后設(shè)定為了達(dá)到這個(gè)目標(biāo)的所需要的環(huán)節(jié)和方案以及對(duì)那些方案的一些評(píng)價(jià)標(biāo)準(zhǔn)。這些就是層次分析法的各層要素。運(yùn)用AHP進(jìn)行系統(tǒng)分析時(shí)，要將所包含的因素分組，每一組作為一個(gè)層次，按照最高層、若干有關(guān)的中間層和最低層的形式排列起來(lái)。其中：最高層：表示解決問(wèn)題的目的，即應(yīng)用AHP所要達(dá)到的目標(biāo)。中間層：它表示采用某種措施和政策來(lái)實(shí)現(xiàn)預(yù)定目標(biāo)所涉及的中間環(huán)節(jié)，一般又分為策略層、約束層、準(zhǔn)則層等。最低層：表示解決問(wèn)題的措施或政策(即方案)。標(biāo)明上一層因素與下一層因素之間的聯(lián)系。如果某個(gè)因素與下一層次所有因素均有聯(lián)系，那么稱這個(gè)因素與下一層次存在完全層次關(guān)系。有時(shí)存在不完全層次關(guān)系，即某個(gè)因素只與下一層次的部分因素有聯(lián)系。層次之間可以建立于層次。于層次從屬于主層次的某個(gè)因素，它的因素與下一層次的因素有聯(lián)系，但不形成獨(dú)立層次，層次結(jié)構(gòu)模型往往用結(jié)構(gòu)模型圖表示。在各個(gè)階層的各個(gè)要素，確定要素之間的優(yōu)先度。這個(gè)時(shí)候要素之間要進(jìn)行兩兩比對(duì)確定優(yōu)先度。2、構(gòu)造兩兩比較判斷矩陣任何系統(tǒng)分析都以一定的信息為基礎(chǔ)。AHP的信息基礎(chǔ)主要是人們對(duì)每一層次各因素的相對(duì)重要性給出的判斷，對(duì)各指標(biāo)之間進(jìn)行兩兩對(duì)比之后，然后按9分位比率排定各評(píng)價(jià)指標(biāo)的相對(duì)優(yōu)劣順序，依次構(gòu)造出評(píng)價(jià)指標(biāo)的判斷矩陣。判斷矩陣是AHP工作的出發(fā)點(diǎn)。構(gòu)造判斷矩陣是AHP的關(guān)鍵一步。判斷矩陣表示針對(duì)上一層次某因素而言，本層次與之有關(guān)的各因素之間的相對(duì)重要性。3、層次單排序，計(jì)算各層因素的權(quán)重所謂層次單排序是指，根據(jù)判斷矩陣計(jì)算對(duì)于上一層某因素而言，本層次與之有聯(lián)系的因素的重要性次序的權(quán)值。它是本層次所有因素相對(duì)上一層次而言的重要性進(jìn)行排序的基礎(chǔ)。層次單排序可以歸結(jié)為計(jì)算判斷矩陣的特征根和特征向量問(wèn)題，即對(duì)判斷矩陣B，計(jì)算滿足BW=λmaxW的特征根與特征向量，式中λmax為B的最大特征根，W為對(duì)應(yīng)于λmax的正規(guī)化特征向量，W的分量Wi是相應(yīng)因素單排序的權(quán)值。為了檢驗(yàn)矩陣的一致性，需要計(jì)算它的一致性指標(biāo)CI，定義CI=(λmax－n)/(n－1)顯然，當(dāng)判斷矩陣具有完全一致性時(shí)，CI=0。λmax－n愈大，CI愈大，矩陣的一致性愈差。為了檢驗(yàn)判斷矩陣是否具有滿意的一致性，需要將CI與平均隨機(jī)一致性指標(biāo)RI進(jìn)行比較。4、層次總排序，計(jì)算當(dāng)前一層元素關(guān)于總目標(biāo)的排序權(quán)重。利用同一層次中所有層次單排序的結(jié)果，就可以計(jì)算針對(duì)上一層次而言，本層次所有因素重要性的權(quán)值，這就是層次總排序。層次總排序需要從上到下逐層順序進(jìn)行，對(duì)于最高層下面的第二層，其層次單排序即為總排序。5、一致性檢驗(yàn)構(gòu)造好判斷矩陣后，需要根據(jù)判斷矩陣計(jì)算針對(duì)某一準(zhǔn)則層各元素的相對(duì)權(quán)重，并進(jìn)行一致性檢驗(yàn)。雖然在構(gòu)造判斷矩陣A時(shí)并不要求判斷具有一致性，但判斷偏離一致性過(guò)大也是不允許的。因此需要對(duì)判斷矩陣A進(jìn)行一致性檢驗(yàn)。計(jì)算出判斷結(jié)果的一致性。最后得出用AHP分析出的最終結(jié)論。[注]出自Saaty,ThomasL.(1999-05-01).DecisionMakingforLeaders:TheAnalyticHierarchyProcessforDecisionsinaComplexWorld.Pittsburgh,Pennsylvania:RWSPublications.\o"ISBN"ISBN\o"特別:文獻(xiàn)資料/0-9620317-8-X"0-9620317-8-X.另外，為了簡(jiǎn)單地使用這個(gè)手法，一些企業(yè)開(kāi)始開(kāi)發(fā)并銷售相應(yīng)的計(jì)算機(jī)軟件。比較著名的是MCE和ExpertChoice軟件等。這些軟件能夠綜合多樣的利益關(guān)系者的資訊與提供必要的能力加以分析，按優(yōu)先順序處理，以及交流這些決策。能夠幫助用戶構(gòu)建常規(guī)或非常規(guī)的層次圖，并且方便用戶在個(gè)準(zhǔn)則層中加入判斷矩陣，層次圖用來(lái)組織所有相關(guān)的準(zhǔn)則，以邏輯化和系統(tǒng)化的方式解決決策問(wèn)題，即，從目標(biāo)層到準(zhǔn)則層最后選擇方案這一過(guò)程。用戶也可以自己定義問(wèn)題并且在層次圖中輸入所有的相關(guān)信息?；贏HP方法提供數(shù)學(xué)上嚴(yán)謹(jǐn)?shù)膽?yīng)用與經(jīng)證明的優(yōu)先順序化過(guò)程與決策制定。把復(fù)雜的決策簡(jiǎn)化為一系列成對(duì)的比價(jià)，然后整合結(jié)果，這些軟件不僅能夠幫助決策者作出最好的決定，而且為決策提供一個(gè)清楚的基本原理。提供決策者經(jīng)驗(yàn)證明過(guò)的整合資料程序并通過(guò)一個(gè)簡(jiǎn)單的應(yīng)用程序發(fā)展優(yōu)先順序，而不需要高級(jí)程度決策學(xué)專業(yè)就可以實(shí)現(xiàn)。3.3Saaty1-9標(biāo)度法19標(biāo)度系統(tǒng)是層次分析法使用的基礎(chǔ).Saaty教授最早提出的，對(duì)層次分析法的理論與應(yīng)用研究起到了十分巨大的作用.。1-9因方法簡(jiǎn)潔、實(shí)用且有堅(jiān)實(shí)的數(shù)學(xué)基礎(chǔ)而得到廣泛研究與應(yīng)用.層次分析法是一種定性與定量相結(jié)合的對(duì)多目標(biāo)多準(zhǔn)則系統(tǒng)進(jìn)行分析與評(píng)價(jià)的決策方法,它根據(jù)給定的數(shù)字標(biāo)度,將人的主觀判斷轉(zhuǎn)化為數(shù)量的形式進(jìn)行處理,得到有效的決策方案.由于數(shù)量化的結(jié)果是決策的依據(jù),量化方法的科學(xué)性至關(guān)重要,所以將定性與定量相結(jié)合的橋梁Saaty1-9標(biāo)度法，是確認(rèn)因素價(jià)值的一種重要方法，1-9標(biāo)度法不僅能對(duì)因素之間的重要性及重要性大小進(jìn)行明確的判斷和評(píng)價(jià)，而且可以檢驗(yàn)并保持評(píng)價(jià)過(guò)程的一致性。按下述標(biāo)度進(jìn)行賦值。aij在1-9及其倒數(shù)中間取值。aij=1，元素i與元素j對(duì)上一層次因素的重要性相同；aij=3，元素i比元素j略重要；aij=5，元素i比元素j重要；aij=7，元素i比元素j重要得多；aij=9，元素i比元素j的極其重要；aij=2n，n=1,2,3,4，元素i與j的重要性介于aij=2n?1與aij=2n+1之間；，n=1,2,...,9，當(dāng)且僅當(dāng)aji=n。Saaty1-9標(biāo)度法選用1-9的數(shù)字（及其倒數(shù)）作為評(píng)價(jià)要素，對(duì)人的主觀判斷進(jìn)行量化，將各層次兩兩對(duì)比進(jìn)行重要性判斷，構(gòu)成兩兩比較判斷矩陣，然后用矩陣原理計(jì)算方法，計(jì)算出各層次相應(yīng)權(quán)重。層次分析法通過(guò)把問(wèn)題層次化、數(shù)量化，再運(yùn)用數(shù)學(xué)進(jìn)行分析，為復(fù)雜問(wèn)題提供簡(jiǎn)便、科學(xué)的決策方法，在社會(huì)、管理、經(jīng)濟(jì)、教育等方面得到廣泛運(yùn)用。具體標(biāo)度方法是，使用1-9及其倒數(shù)作為標(biāo)度進(jìn)行賦值，在判斷兩個(gè)元素重要性區(qū)別。1表示相等、3表示較強(qiáng)、5表示強(qiáng)、7表示很強(qiáng)、9表示絕對(duì)強(qiáng)……，將思維判斷數(shù)量化，具體見(jiàn)表2。表21-9標(biāo)度原則標(biāo)度含義1表示兩個(gè)元素相比，具有同樣的重要性3表示兩個(gè)元素相比，一個(gè)元素比另一個(gè)元素稍微重要5表示兩個(gè)元素相比，一個(gè)元素比另一個(gè)元素明顯重要7表示兩個(gè)元素相比，一個(gè)元素比另一個(gè)元素強(qiáng)烈重要9表示兩個(gè)元素相比，一個(gè)元素比另一個(gè)元素極端重要2,4,6,82，4，6，8為上述相鄰判斷的中值上述數(shù)字的倒數(shù)表示相應(yīng)兩因素交換次序比較的重要性然而,在實(shí)際應(yīng)用的過(guò)程中，人們也逐漸意識(shí)到1~9標(biāo)度存在了一些缺陷。具體表現(xiàn)為以下幾個(gè)方面：（1）對(duì)于權(quán)重的計(jì)算太粗糙。（2）受主觀因素影響，容易出現(xiàn)矩陣一致性與思維一致性的不協(xié)調(diào)的問(wèn)題。（3）一致性矩陣的容量太小，對(duì)于相對(duì)復(fù)雜的矩陣無(wú)法進(jìn)行合理的建模。（4）1-9標(biāo)度的數(shù)學(xué)結(jié)構(gòu)在某些領(lǐng)域較差。為了彌補(bǔ)1~9標(biāo)度存在的缺陷,國(guó)內(nèi)外學(xué)者們相繼提出了一些改善手法，也有學(xué)者們提出了一些不同的數(shù)字標(biāo)度方法。但是到目前為止，在對(duì)主觀因素進(jìn)行客觀標(biāo)度這個(gè)問(wèn)題上，依然沒(méi)有完美的方法出現(xiàn)。本論文討論的評(píng)價(jià)指標(biāo)體系中，其總體權(quán)重評(píng)價(jià)結(jié)果相對(duì)比較協(xié)調(diào)，在指標(biāo)內(nèi)部相互關(guān)系較為和諧。另外，采用Satty1-9標(biāo)度法會(huì)使標(biāo)度較為簡(jiǎn)單清晰，對(duì)于矩陣的計(jì)算也比較方便，得出的權(quán)重可以精確到了0.0001位，已經(jīng)符合了基本的評(píng)價(jià)精度要求。因此，本論文為了方便計(jì)算和加權(quán)，仍然采取Satty1-9標(biāo)度法進(jìn)行標(biāo)度和計(jì)算。3.4模糊評(píng)估法1965年美國(guó)計(jì)算機(jī)與控制專家LotfiAskerZadeh教授發(fā)表的論文中首次提出表達(dá)事物模糊性的重要概念：隸屬函數(shù),從而突破了19世紀(jì)末\o"勒內(nèi)·笛卡爾"勒內(nèi)·笛卡爾（\o"ReneDescartes"ReneDescartes）的經(jīng)典集合理論,奠定模糊理論的基礎(chǔ)。而模糊集合概念，則可以看作是模糊綜合評(píng)價(jià)法等其他模糊理論的起源。3.4.1模糊綜合評(píng)價(jià)法的發(fā)展及應(yīng)用模糊綜合評(píng)價(jià)法基于模糊數(shù)學(xué)衍生而來(lái)。模糊綜合評(píng)價(jià)法是一種基于模糊數(shù)學(xué)的綜合評(píng)標(biāo)方法。該綜合評(píng)價(jià)法根據(jù)模糊數(shù)學(xué)的隸屬度理論把定性評(píng)價(jià)轉(zhuǎn)化為定量評(píng)價(jià)，即用模糊數(shù)學(xué)對(duì)受到多種因素制約的事物或?qū)ο笞龀鲆粋€(gè)總體的評(píng)價(jià)。它具有結(jié)果清晰，系統(tǒng)性強(qiáng)的特點(diǎn)，能較好地解決模糊的、難以量化的問(wèn)題，適合各種非確定性問(wèn)題的解決。模糊綜合評(píng)價(jià)法是在模糊的環(huán)境下，考慮了多種因素的影響，根據(jù)模糊數(shù)學(xué)的隸屬度理論把定性評(píng)價(jià)轉(zhuǎn)化為定量評(píng)價(jià)，即用模糊數(shù)學(xué)的方式對(duì)受到多種因素制約的事物或?qū)ο笞龀鲆粋€(gè)可以量化的綜合評(píng)價(jià)的方法。綜合評(píng)價(jià)法具有結(jié)果清晰，系統(tǒng)性強(qiáng)的特點(diǎn)，能較好地解決模糊的、難以量化的問(wèn)題，適合各種非確定性問(wèn)題的解決。在模糊理論50多年的發(fā)展過(guò)程中，國(guó)內(nèi)外的學(xué)者在模糊理論做了大量卓有成效的工作，使得模糊理論得到了迅猛的發(fā)展。雖然該理論在發(fā)表的初期，遭到了很多質(zhì)疑和批評(píng)，但是它的實(shí)用性已經(jīng)在各種各樣的實(shí)用案例中的得到了成功的運(yùn)用。20世紀(jì)80年代后期，日本開(kāi)始有學(xué)者將模糊技術(shù)應(yīng)用于智能裝備、機(jī)器人、過(guò)程控制、地鐵機(jī)車(chē)、交通管理、故障診斷、醫(yī)療診斷、市場(chǎng)預(yù)測(cè)等眾多領(lǐng)域。模糊理論及相關(guān)衍生的模糊法在日本的應(yīng)用和巨大的市場(chǎng)前景，對(duì)于世界企業(yè)界產(chǎn)生了很大震動(dòng)?，F(xiàn)在，模糊綜合評(píng)價(jià)法作為模糊理論的一個(gè)分支也已經(jīng)得到了廣泛的認(rèn)可。和熵權(quán)法一樣，成為研究不確定問(wèn)題的幾種重要方法之一。3.4.2模糊綜合評(píng)價(jià)的基本原理首先確定被評(píng)價(jià)對(duì)象的因素（指標(biāo)）集合評(píng)價(jià)（等級(jí)）集，在分別確定個(gè)因素的權(quán)重及他們的隸屬度向量，獲得模糊判斷矩陣；最后把模糊判斷矩陣的權(quán)向量進(jìn)行模糊運(yùn)算并進(jìn)行歸一化，得到模糊綜合評(píng)價(jià)結(jié)果。其特點(diǎn)在于評(píng)判逐對(duì)象進(jìn)行，對(duì)被評(píng)價(jià)對(duì)象有唯一的評(píng)價(jià)值，不受被評(píng)價(jià)對(duì)象所在對(duì)象集合的影響。綜合評(píng)價(jià)的目的是要從對(duì)象集中選出優(yōu)勝對(duì)象，所以還需要對(duì)所有評(píng)價(jià)對(duì)象的綜合評(píng)價(jià)結(jié)果進(jìn)行排序。3.4.3模糊綜合評(píng)價(jià)法的模型和步驟（1）確定評(píng)價(jià)對(duì)象的因素論域上述因素論域表示有m個(gè)評(píng)價(jià)指標(biāo)，我們會(huì)從m個(gè)角度對(duì)評(píng)價(jià)對(duì)象進(jìn)行綜合判斷描述。（2）確定評(píng)語(yǔ)等級(jí)論域?qū)嶋H上就是對(duì)被評(píng)價(jià)對(duì)象變化區(qū)間的一個(gè)劃分。其中vi代表第i個(gè)評(píng)價(jià)結(jié)果，n為總評(píng)價(jià)結(jié)果數(shù)。具體等級(jí)劃分可以根據(jù)評(píng)價(jià)對(duì)象和內(nèi)容用適當(dāng)?shù)恼Z(yǔ)言進(jìn)行描述，比如競(jìng)爭(zhēng)力體系可以用強(qiáng)、中、弱等。經(jīng)濟(jì)效益可以用好、較好、一般、差等。（3）進(jìn)行單因素評(píng)價(jià)，建立模糊關(guān)系矩陣R單獨(dú)從一個(gè)因素出發(fā)進(jìn)行評(píng)價(jià)，以確定評(píng)價(jià)對(duì)象對(duì)評(píng)價(jià)集合V的隸屬程度，稱為單因素模糊評(píng)價(jià)。在構(gòu)造等級(jí)模糊子集后，就要逐個(gè)對(duì)被評(píng)價(jià)對(duì)象的每一個(gè)因素進(jìn)行量化，也就是確定從單因素上來(lái)看被評(píng)價(jià)對(duì)象對(duì)各等級(jí)模糊子集的隸屬度，進(jìn)而得到模糊關(guān)系矩陣R。其中Rij表示某個(gè)評(píng)價(jià)對(duì)象從因素UI來(lái)看對(duì)vi等級(jí)模糊子集的隸屬度。一個(gè)被評(píng)價(jià)對(duì)象在某個(gè)因素ui方面是通過(guò)模糊向量r來(lái)刻畫(huà)的（在其他評(píng)價(jià)方法中，多由一個(gè)指標(biāo)的實(shí)際值來(lái)刻畫(huà)，因此從這個(gè)角度講，模糊綜合評(píng)價(jià)要求更多地信息）RI稱為單因素評(píng)價(jià)矩陣，可以看作因素集U和評(píng)價(jià)集V之間的一種模糊關(guān)系，即影響因素和評(píng)價(jià)對(duì)象之間的“合理關(guān)系”在確定隸屬關(guān)系時(shí)，通常由專家或者評(píng)價(jià)問(wèn)題相關(guān)的專業(yè)人員依據(jù)評(píng)判等級(jí)對(duì)評(píng)價(jià)對(duì)象進(jìn)行打分，然后統(tǒng)計(jì)打分結(jié)果，然后根據(jù)絕對(duì)值減數(shù)法求得RIJ。3.4.4模糊綜合評(píng)價(jià)法的最顯著特點(diǎn)是：1、從實(shí)際問(wèn)題的具體特征出發(fā),總結(jié)和吸取人們長(zhǎng)期積累的實(shí)踐經(jīng)驗(yàn),特別要重視那些專家的經(jīng)驗(yàn)。雖然隸屬函數(shù)的確定容許有一定的人為技巧,但最終還是要以符合客觀實(shí)際為標(biāo)準(zhǔn)。2、在某些情況下,隸屬函數(shù)可通過(guò)模糊統(tǒng)計(jì)試驗(yàn)來(lái)確定。一般來(lái)說(shuō),這種方法是較為有效的。3、隸屬函數(shù)還可以用概率統(tǒng)計(jì)的處理結(jié)果來(lái)確定。4、在一定條件下,隸屬函數(shù)也可以作為推理的產(chǎn)物,只要實(shí)驗(yàn)符合實(shí)際即可。5、有些隸屬函數(shù)可以經(jīng)過(guò)模糊運(yùn)算“并、交、余”求得。6、在許多應(yīng)用中,由于人們認(rèn)識(shí)事物的局限性,因此開(kāi)始只能建立一個(gè)近似的隸屬函數(shù),然后通過(guò)學(xué)習(xí)逐步修改使之完善。7、判斷隸屬函數(shù)是否符合實(shí)際,主要看它是否正確地反映了元素隸屬集合到不屬于集合這一變化過(guò)程的整體特性,而不在于單個(gè)元素的隸屬數(shù)值如何。8、能夠通過(guò)精確的數(shù)學(xué)手段處理模糊的評(píng)價(jià)對(duì)象，能對(duì)蘊(yùn)藏信息呈現(xiàn)模糊性的資料做出比較科學(xué)的、合理的、貼近實(shí)技的量化評(píng)價(jià)。9、評(píng)價(jià)結(jié)果是向量型式，而不是一個(gè)具體的點(diǎn)或者值，包含的信息量相對(duì)比較豐富，即可以比較準(zhǔn)確的刻畫(huà)被評(píng)價(jià)的對(duì)象，有可以進(jìn)一步加工，得到相關(guān)的參考信息。第四章：評(píng)價(jià)指標(biāo)體系的設(shè)計(jì)和權(quán)重的確立4.1評(píng)價(jià)指標(biāo)體系構(gòu)建原則、方法及框架指標(biāo)是一個(gè)名詞，指的是衡量目標(biāo)的單位或方法。從知識(shí)管理的角度來(lái)講，評(píng)價(jià)指標(biāo)體系指的是可以用來(lái)表述出被評(píng)價(jià)對(duì)象各個(gè)方面特征并且能夠體現(xiàn)出這些特征之間聯(lián)系的多個(gè)指標(biāo)構(gòu)成的集合體。[注][朱振中石志敏.新產(chǎn)品開(kāi)發(fā)中評(píng)價(jià)指標(biāo)體系的建立與模糊綜合評(píng)價(jià).山東工程學(xué)院學(xué)報(bào),2001,15(3)]通俗來(lái)講，指標(biāo)根據(jù)選定的性質(zhì)可以表述出被評(píng)價(jià)對(duì)象的某些特征性質(zhì)或者某些具體數(shù)值，進(jìn)而可以觀察出所研究現(xiàn)象的某一特征，或者反應(yīng)出某個(gè)簡(jiǎn)單的事實(shí)。指標(biāo)體系則是將具體的指標(biāo)進(jìn)行科學(xué)的分類，進(jìn)而形成的一系列相互聯(lián)系、相互制約的指標(biāo)集合體。按照表征內(nèi)容能否被數(shù)量化這一原則進(jìn)行區(qū)分，可以將評(píng)價(jià)指標(biāo)歸類為可計(jì)量指標(biāo)和非可計(jì)量指標(biāo)兩種。可計(jì)量指標(biāo)指的是可以通過(guò)用數(shù)值或者數(shù)量的方式對(duì)指標(biāo)進(jìn)行剖析。對(duì)于可計(jì)量指標(biāo)，根據(jù)考察時(shí)采取的不同方式或者分類規(guī)則可以進(jìn)行更為細(xì)致的分類：按照所計(jì)量的內(nèi)容不同，可計(jì)量指標(biāo)還可以細(xì)分為價(jià)值量指標(biāo)和實(shí)物量指標(biāo)；按照所計(jì)量的數(shù)據(jù)處理方式不同，則可以細(xì)分為數(shù)量化指標(biāo)和比率化指標(biāo)。非可計(jì)量指標(biāo)指的是人們無(wú)法按照常規(guī)的定量分析來(lái)確立出的指標(biāo)，即通常研究人員所說(shuō)的定性指標(biāo)，一般按照被評(píng)價(jià)對(duì)象的特征屬性、常規(guī)定義、運(yùn)行方式等原則對(duì)指標(biāo)進(jìn)行定義，進(jìn)而通過(guò)對(duì)被評(píng)價(jià)對(duì)象的某個(gè)特征進(jìn)行語(yǔ)言描述或者判斷分析，達(dá)到剖析問(wèn)題和解決問(wèn)題的目的。在使用非可計(jì)量指標(biāo)的進(jìn)行評(píng)價(jià)時(shí)需要科學(xué)嚴(yán)謹(jǐn)?shù)亩x出該指標(biāo)的標(biāo)度范圍，才能有效的將主觀經(jīng)驗(yàn)判斷合理的進(jìn)行數(shù)值轉(zhuǎn)換。4.1.1評(píng)價(jià)指標(biāo)體系的構(gòu)建原則指標(biāo)體系作為內(nèi)部相互作用的一個(gè)有機(jī)整體，不但應(yīng)從不同的角度反映出被評(píng)價(jià)系統(tǒng)的主要特征變化，還要能體現(xiàn)出系統(tǒng)的發(fā)展趨勢(shì)。對(duì)于任何一種指標(biāo)體系的建立都有其依據(jù)的理論基礎(chǔ)，E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)指標(biāo)體系的設(shè)計(jì)必須以科學(xué)管理理論、統(tǒng)計(jì)理論為依據(jù)，進(jìn)而實(shí)現(xiàn)評(píng)價(jià)指標(biāo)體系規(guī)范性和科學(xué)性。為了保證DST公司E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)指標(biāo)體系設(shè)置的科學(xué)性和規(guī)范性，我們?cè)谠O(shè)計(jì)DST公司E-Learning系統(tǒng)培訓(xùn)效果的評(píng)價(jià)指標(biāo)體系時(shí)，一直遵循如下價(jià)格原則：全面性原則（系統(tǒng)性原則）企業(yè)E-Learning系統(tǒng)培訓(xùn)效果的評(píng)價(jià)指設(shè)定時(shí)標(biāo)應(yīng)把握系統(tǒng)整體性的立場(chǎng)出發(fā)，全面地、客觀地、系統(tǒng)地反映企業(yè)E-Learning系統(tǒng)中的各個(gè)子系統(tǒng)，及其相互協(xié)調(diào)以及整體運(yùn)作。為體現(xiàn)E-Learning培訓(xùn)效果模型的全面性、完整性，在充分調(diào)研的基礎(chǔ)上，還要求我們把評(píng)價(jià)指標(biāo)體系視為一個(gè)系統(tǒng)，以評(píng)價(jià)指標(biāo)體系整體目標(biāo)的優(yōu)化為準(zhǔn)繩，協(xié)調(diào)體系中各個(gè)子指標(biāo)的相互關(guān)系，使體系完整、平衡?？茖W(xué)性原則具體指標(biāo)的選取要以科學(xué)思想為指導(dǎo)，以一定的事實(shí)為依據(jù)，使所選課題具有理論和實(shí)踐基礎(chǔ)。指標(biāo)應(yīng)目的明確、定義準(zhǔn)確。有科學(xué)依據(jù)，以科學(xué)思想為指導(dǎo)，規(guī)范定量指標(biāo)的計(jì)算及其涵義，規(guī)范資料數(shù)據(jù)來(lái)源。同時(shí)所運(yùn)用的計(jì)算方法和模型也必須科學(xué)規(guī)范，這樣才能保證評(píng)價(jià)結(jié)果的真實(shí)和客觀。納入E-Learning培訓(xùn)效果評(píng)價(jià)體系的每一個(gè)指標(biāo)都需要有明確的內(nèi)涵和科學(xué)的解釋，要考慮指標(biāo)選擇、指標(biāo)權(quán)重確定、數(shù)據(jù)選取時(shí)的可比性和計(jì)算方法的科學(xué)性，客觀全面地反映企業(yè)E-Learning培訓(xùn)系統(tǒng)的運(yùn)行狀況。簡(jiǎn)明性原則從理論上講，指標(biāo)越多越細(xì)越全面，反映客觀現(xiàn)實(shí)也越準(zhǔn)確。但是，隨著指標(biāo)量的增加，帶來(lái)的數(shù)據(jù)收集和加工處理的工作量將成倍增長(zhǎng)，而且，指標(biāo)分得過(guò)細(xì)，難免發(fā)生指標(biāo)與指標(biāo)的重疊，相關(guān)性嚴(yán)重，甚至相互對(duì)立的現(xiàn)象，這反而給綜合評(píng)價(jià)帶來(lái)不便?？刹僮餍栽瓌t在各指標(biāo)子系統(tǒng)中，存在較多難以定量、精確計(jì)算或獲取的數(shù)據(jù)。指標(biāo)的設(shè)計(jì)既要考慮有數(shù)據(jù)的支持、數(shù)據(jù)獲取的難易程度和可靠性，又要考慮計(jì)算方法的簡(jiǎn)易性等。評(píng)價(jià)指標(biāo)過(guò)于復(fù)雜，會(huì)給評(píng)價(jià)帶來(lái)困難，甚至不可操作；過(guò)于簡(jiǎn)單，又不能反映評(píng)價(jià)對(duì)象的基本情況。因此，在構(gòu)建評(píng)價(jià)指標(biāo)體系時(shí)，應(yīng)挑選一些易于計(jì)算、容易取得并且能夠在要求水平上很好地反映E-Learning培訓(xùn)效果實(shí)際情況的指標(biāo)，使得所構(gòu)建的指標(biāo)體系具有較強(qiáng)的可操作性。從本質(zhì)上說(shuō)，可操作性定義就是詳細(xì)描述研究變量的操作程序和測(cè)量指標(biāo)。在實(shí)證性研究中，操作性定義尤為重要，它是研究是否有價(jià)值的重要前提。動(dòng)態(tài)性原則E-Learning培訓(xùn)效果評(píng)價(jià)是一個(gè)動(dòng)態(tài)過(guò)程，對(duì)于同一個(gè)方法，不同時(shí)期預(yù)示著不同的指標(biāo)維度以及發(fā)展的目標(biāo)、發(fā)展模式、為達(dá)到目標(biāo)而采取的手段均不相同，指標(biāo)體系的過(guò)程中側(cè)重點(diǎn)自然也不同。穩(wěn)定性原則指標(biāo)體系的穩(wěn)定性，可在E-Learning培訓(xùn)效果評(píng)價(jià)中維持可持續(xù)的衡量、評(píng)價(jià)和調(diào)控，從而使其發(fā)展更有利于向可持續(xù)標(biāo)準(zhǔn)的方向發(fā)展，避免出現(xiàn)評(píng)價(jià)中的不確定性?？杀刃栽瓌t評(píng)價(jià)指標(biāo)要具有橫向和縱向的可比性，即具有企業(yè)之間的可比性和區(qū)域縱向時(shí)間上的可比性，這樣才能客觀、全面地反映企業(yè)E-Learning系統(tǒng)培訓(xùn)效果所處的水平。4.1.2評(píng)價(jià)指標(biāo)體系構(gòu)建方法評(píng)價(jià)指標(biāo)體系的設(shè)計(jì)過(guò)程是首先采用德?tīng)柗茖＜乙庖?jiàn)法，進(jìn)行匿名函征，進(jìn)而完成評(píng)價(jià)指標(biāo)的初步設(shè)計(jì)；然后將所以的意見(jiàn)匯總，再次以匿名函征的方式，征詢專家們的意見(jiàn)，剔除普遍認(rèn)為不符合實(shí)際和操作性較差的選項(xiàng)；最后，統(tǒng)一專家們的意見(jiàn)，選取直觀的、易于獲得的可評(píng)價(jià)信息，確定出最后評(píng)價(jià)指標(biāo)。為了得到一個(gè)合理的指標(biāo)權(quán)重，本研究課題邀請(qǐng)了十位相關(guān)領(lǐng)域的專家和實(shí)際工作者，其中，廠商從業(yè)者占3%，高校教職人員占2%，人力部門(mén)主管和日方技術(shù)專家占3%，代理店客戶服務(wù)經(jīng)理占1%，業(yè)內(nèi)資深分析師占1%。在Delphi原理下按照嚴(yán)格的流程對(duì)本課題的指標(biāo)體系進(jìn)行打分，最后經(jīng)過(guò)嚴(yán)格的數(shù)學(xué)處理，確定了指標(biāo)的相對(duì)權(quán)重。這些專家全程參與目標(biāo)的設(shè)定，見(jiàn)證了德?tīng)柗品ǖ娜康倪^(guò)程。4.1.3評(píng)價(jià)指標(biāo)體系框架為全面建立一個(gè)評(píng)價(jià)指標(biāo)體系，筆者對(duì)專家們進(jìn)行了反復(fù)的函征意見(jiàn)，最終通過(guò)專家們反復(fù)推敲和商議，達(dá)成一致性結(jié)論，評(píng)價(jià)指標(biāo)體系分為4個(gè)一級(jí)指標(biāo)（知識(shí)內(nèi)容、培訓(xùn)方式、實(shí)訓(xùn)操作、培訓(xùn)收獲）和18個(gè)二級(jí)指標(biāo)，以下是討論出的指標(biāo)評(píng)價(jià)內(nèi)容：表1E-Learning培訓(xùn)效果評(píng)價(jià)指標(biāo)體系一級(jí)指標(biāo)二級(jí)指標(biāo)指標(biāo)釋義A1知識(shí)內(nèi)容A11最新性能夠反映出該行業(yè)或該技術(shù)的最新成果A12權(quán)威性、專業(yè)性所授內(nèi)容保證符合專業(yè)要求，數(shù)據(jù)和技術(shù)能夠保證絕對(duì)的權(quán)威性A13系統(tǒng)性、接續(xù)性能夠系統(tǒng)的教授技能，跟往期培訓(xùn)或者受訓(xùn)者技能能源良好銜接A14實(shí)用性、針對(duì)性對(duì)工作或者生產(chǎn)有實(shí)際效果，對(duì)現(xiàn)實(shí)工作有針對(duì)性，有指導(dǎo)意義A2培訓(xùn)方式A21培訓(xùn)效率可以在短期內(nèi)得到較好的培訓(xùn)效果，培訓(xùn)效率高A22靈活性隨時(shí)可以進(jìn)行學(xué)、網(wǎng)絡(luò)需求小，有手機(jī)APPA23可靠程度較為穩(wěn)定的系統(tǒng)，即使退出也容易繼續(xù)接續(xù)學(xué)習(xí)，受外界干擾較小A3實(shí)訓(xùn)操作A31容易檢索知識(shí)和培訓(xùn)內(nèi)容容易被檢索到，易于分類和匯總A32導(dǎo)航性能有明確的指引功能，容易操作和用戶親和力，有記憶功能A33容易交流方便與同時(shí)接受培訓(xùn)的人或者講師進(jìn)行互動(dòng)和交流，有bbs功能A4培訓(xùn)收獲A41掌握程度提高對(duì)專業(yè)領(lǐng)域內(nèi)的最新成果和發(fā)展趨勢(shì)的了解程度，更新自身現(xiàn)有知識(shí)結(jié)構(gòu)。A42實(shí)操能力提高動(dòng)手能力，將培訓(xùn)上學(xué)習(xí)的知識(shí)活用到實(shí)際生產(chǎn)中去，提高現(xiàn)場(chǎng)解決速度。A43創(chuàng)新能力提升創(chuàng)新意識(shí)，結(jié)合培訓(xùn)內(nèi)容，觸類旁通，在后續(xù)應(yīng)用在提升自身的創(chuàng)造能力。A44工作質(zhì)量提高在工作中處理問(wèn)題的準(zhǔn)確性和辦公質(zhì)量。A45工作效率有效的提高各環(huán)節(jié)的操作效率和更有效的切入問(wèn)題。A46客戶滿意客戶（或下一工序）對(duì)工作的評(píng)價(jià)情況A47企業(yè)競(jìng)爭(zhēng)力能夠更好的提升企業(yè)競(jìng)爭(zhēng)力，在同行業(yè)內(nèi)得到好評(píng)4.2指標(biāo)的標(biāo)度方法4.2.1采用Saaty標(biāo)度法對(duì)指標(biāo)進(jìn)行賦值本論文的指標(biāo)標(biāo)度選用Saaty標(biāo)度法進(jìn)行，為了得到判別矩陣，利用1-9標(biāo)度對(duì)人的主觀判斷進(jìn)行量化，將各層次兩兩對(duì)比進(jìn)行重要性判斷，構(gòu)成兩兩比較判斷矩陣，然后用矩陣原理計(jì)算方法，計(jì)算出各層次相應(yīng)權(quán)重。層次分析法通過(guò)把問(wèn)題層次化、數(shù)量化，再運(yùn)用數(shù)學(xué)進(jìn)行分析，為復(fù)雜問(wèn)題提供簡(jiǎn)便、科學(xué)的決策方法，在社會(huì)、管理、經(jīng)濟(jì)、教育等方面得到廣泛運(yùn)用。在進(jìn)行指標(biāo)標(biāo)度時(shí)，需要向?qū)＜野l(fā)度加權(quán)意見(jiàn)問(wèn)詢表，對(duì)賦值的方法和標(biāo)準(zhǔn)向?qū)＜覀冞M(jìn)行詳細(xì)的說(shuō)明，請(qǐng)專家們?cè)谥笜?biāo)之間采取兩兩比較的方法，進(jìn)行逐層次的比較，然后使用1-9及其倒數(shù)作為標(biāo)度進(jìn)行賦值，在判斷兩個(gè)元素重要性區(qū)別。1表示相等、3表示較強(qiáng)、5表示強(qiáng)、7表示很強(qiáng)、9表示絕對(duì)強(qiáng)……，將主觀做出的判斷進(jìn)行數(shù)量化，具體見(jiàn)表2。表21-9標(biāo)度原則標(biāo)度含義1表示兩個(gè)元素相比，具有同樣的重要性3表示兩個(gè)元素相比，一個(gè)元素比另一個(gè)元素稍微重要5表示兩個(gè)元素相比，一個(gè)元素比另一個(gè)元素明顯重要7表示兩個(gè)元素相比，一個(gè)元素比另一個(gè)元素強(qiáng)烈重要9表示兩個(gè)元素相比，一個(gè)元素比另一個(gè)元素極端重要2,4,6,82，4，6，8為上述相鄰判斷的中值倒數(shù)表示相應(yīng)兩因素交換次序比較的重要性構(gòu)造判斷矩陣構(gòu)造判斷矩陣:采用Delphi法對(duì)各層指標(biāo)的相對(duì)重要性成對(duì)打分,構(gòu)成判斷矩陣。相對(duì)于企業(yè)E-Learning系統(tǒng)培訓(xùn)效果評(píng)價(jià)指標(biāo)體系這個(gè)總目標(biāo)(A),選擇準(zhǔn)則層(B)中的因素兩兩相對(duì)比較,得出對(duì)于總目標(biāo)的相對(duì)重要性比較的數(shù)值判斷,構(gòu)造該級(jí)別數(shù)值判斷矩陣A-B。同樣,相對(duì)于B1,B2,B3,B4這4個(gè)方面的準(zhǔn)則層,選擇各相對(duì)應(yīng)的指標(biāo)層(C)中的因素兩兩相對(duì)比較,分別構(gòu)造出數(shù)值判斷矩陣B1-C,B2-C,B3-C,B4-C。例如,創(chuàng)新型企業(yè)知識(shí)管理評(píng)價(jià)指標(biāo)A的下一層B1?B5構(gòu)成的判斷矩陣見(jiàn)表1。Bij是判斷矩陣的元素,表示指標(biāo)