人才測評軟件開發(fā)及其應(yīng)用研究
發(fā)布時間：2011-09-13 17:40:32
點擊數(shù)：44483 次
一、問題的提出
人才測評是現(xiàn)代人力資源管理中的新技術(shù)和新方法，而計算機化測評則是現(xiàn)代人才測評中最前沿的課題。所謂計算機化測評即以計算機為媒體來實現(xiàn)對人才的測評。實現(xiàn)計算機化的關(guān)鍵是測評軟件系統(tǒng)的開發(fā)。
測評軟件的開發(fā)有四種方式：一是測試方式的計算機化，即將現(xiàn)有的測評工具和方法等傳統(tǒng)手工紙筆操作方式在計算機上實現(xiàn)，如，標(biāo)準(zhǔn)化測驗、紙筆考試的試卷等。二是測評信息管理的計算機化，如測評對象的基本信息、測評結(jié)果信息等的管理等，提供便利的查詢、遠(yuǎn)距離傳輸方式方法，以及信息的共享等。第三是對測評管理過程進(jìn)行全方位的無紙筆化管理，例如通過網(wǎng)絡(luò)發(fā)布測評公告或信息、接受報名，其它如考場的編排、監(jiān)考人員的分配、評分、測評結(jié)果的分析處理、測評報告的輸出等。四是用現(xiàn)代計算機技術(shù)的功能和特點在計算機上直接開發(fā)測評的工具軟件。如，自適應(yīng)性測驗CAT、自動組卷題庫、虛擬情景測評等。
我國人才測評軟件的開發(fā)研究起步于八十年代后期，由于當(dāng)時計算機軟硬件技術(shù)發(fā)展水平的限制，如計算機速度慢、內(nèi)存小，存儲器容量有限，DOS平臺、文字處理及圖像處理平臺軟件的功能較弱等因素致使當(dāng)時研發(fā)的測評軟件水平軟低，操作復(fù)雜，通用性差，只在非常有限的范圍內(nèi)使用。
九十年代以后，隨著人才測評理論與實踐的發(fā)展，人們對測評軟件工具的需求日益迫切，特別是計算機軟硬件技術(shù)的飛躍，為人才測評軟件的發(fā)展提供了強有力的技術(shù)支持。視窗操作系統(tǒng)(WINDOWS)推出，使測評軟件有了一個很好的支撐平臺；多媒體技術(shù)的發(fā)展使測評軟件突破了簡單文字圖形的內(nèi)容限制，測評內(nèi)容更加豐富化；網(wǎng)絡(luò)的快速發(fā)展，使測評突破了空間的束縛，極大地提高了測評的效率。目前測評軟件已經(jīng)在技術(shù)上躍進(jìn)了一個大臺階，特別是多媒體技術(shù)的應(yīng)用，提高了測評軟件的趣味性和吸引力，在操作上更加簡便和人性化。測評的功能上更加多樣化和綜合化，在這方面做得比較成功的是美國。如美國教育測驗服務(wù)中心(Educational Testing Service，ETS)已經(jīng)在GRE和TOEFL考試上實現(xiàn)了無紙筆化。多數(shù)測評公司的測驗都以軟件的方式提供給用戶，美國全美軟件系統(tǒng)有限公司(ATA)研制出并在美國成功進(jìn)行商業(yè)化運行的E-testing全程自動化測評系統(tǒng)，實現(xiàn)了從報名、抽題、閱卷評分、證書打印，到求職、招聘、人才交流、人才管理各相關(guān)領(lǐng)域內(nèi)的網(wǎng)絡(luò)化運行，將測評、考核、評定、評審與人才推薦、人才交流于一體。
與發(fā)達(dá)國家相比，我國在人才測評軟件開發(fā)方面是相當(dāng)落后的。國內(nèi)一些科研機構(gòu)和電腦公司也在積極進(jìn)行人才測評軟件的開發(fā)，比起八十年代來，技術(shù)方面有了很大的進(jìn)步，但是也存在著很多問題。最突出的是測評內(nèi)容的科學(xué)性問題，有些測評軟件只是將一些常見的測驗作簡單的收集，或粗略編制一些測驗，并未對其進(jìn)行嚴(yán)格的檢驗。此外，系統(tǒng)的兼容性和維護(hù)等問題也比較突出。測評軟件功能都比較單一，有的僅是一個人機對話測試系統(tǒng)，有的只是一個評分系統(tǒng)，有的只是一個信息管理或考務(wù)管理系統(tǒng)，多功能綜合化的測評軟件的開發(fā)則處于探索階段。鑒于此種情況，我們決定在前期探索和實踐的基礎(chǔ)上，進(jìn)行現(xiàn)代人才測評軟件的系統(tǒng)研發(fā)工作，并確立了測評軟件開發(fā)的"三高"標(biāo)準(zhǔn)，即高起點、高水準(zhǔn)、高質(zhì)量。本研究自1995年開始，在對國內(nèi)外測評軟件進(jìn)行調(diào)查和研究的基礎(chǔ)上，確立了人才測評軟件開發(fā)的基本原則，提出了人才測評軟件系統(tǒng)的功能結(jié)構(gòu)。在此理論研究的基礎(chǔ)上開發(fā)出了《華瑞人才測評軟件系統(tǒng)》系列軟件。
二、測評軟件開發(fā)的原則
多年來在人才測評軟件開發(fā)和實際應(yīng)用的經(jīng)驗和教訓(xùn)使我們認(rèn)識到，人才測評軟件的開發(fā)方面應(yīng)該遵循以下六條基本原則。
1.科學(xué)性。所謂科學(xué)性是指測評工具與方法的科學(xué)性�？茖W(xué)性是測評軟件系統(tǒng)的根本，只有做到了測評工具的科學(xué)性，才能保證測評結(jié)果的有效性。我們所開發(fā)的測評系統(tǒng)采用的測評工具，大部分是經(jīng)過自己研究開發(fā)的測驗量表等工具，這些測評工具在研究過程中作過多次預(yù)試和大規(guī)模常模取樣測試，項目分析結(jié)果和信度、效度檢驗均達(dá)到測驗編制的要求以上，并在一些人事測評中試用過，有良好的效果。為了方便用戶的使用，我們也將目前國內(nèi)外最常用的一些標(biāo)準(zhǔn)化的心理量表以集成化的方式納入到系統(tǒng)中。這些量表也都經(jīng)過我們的修訂和校檢。
2.實用性。實用性是指測評工具的設(shè)置和開發(fā)要針對測評工作的實際，能夠滿足組織開展測評的需要。例如我們在開發(fā)《企業(yè)版》軟件時，在內(nèi)容設(shè)置方面，考慮到企業(yè)組織選拔人才測評的需要和進(jìn)行員工心理素質(zhì)測評等多種需要，設(shè)置有基本能力素質(zhì)測評的工具，如《一般能力傾向測驗》，也有人格、個性方面的如《個性品質(zhì)測驗》、《卡特爾16PF個性測驗》量表，還有對人的氣質(zhì)進(jìn)行測評的工具，如《氣質(zhì)測驗》，以及現(xiàn)實能力測驗和心理健康測驗等，如《管理能力測驗》、《心理健康量表》等。本系統(tǒng)的開發(fā)立足于企業(yè)組織進(jìn)行人才選拔與考核和人力資源開發(fā)與管理的實際，因此所選用的測評工具有高的鑒別力。如自陳性個性測驗常會因為測試對象的虛假反應(yīng)而無效，甚至做出錯誤的評價，我們在個性測驗中增加了撒謊量表使測評工具具有一定的防偽能力。
3.公平性。將筆試、心理測驗或其它操作方式內(nèi)容搬到計算機上后，由于操作平臺的變化，有可能產(chǎn)生較大的誤差，測評的效度受到影響。以測評內(nèi)容的呈現(xiàn)方式為例，有的測評軟件是將試題逐題在屏幕上呈現(xiàn)，即一屏一題呈現(xiàn)的方式，這樣就將一份測驗分成多個單元，打亂了內(nèi)容的連續(xù)性和整體性，不僅前后對照及修改較為困難，而且對測試內(nèi)容有極大的限制(即內(nèi)容的長度不能超過一屏)。本系統(tǒng)采用平拉開方式，測試內(nèi)容在屏幕上象平攤開的書本一樣，與常規(guī)測試試卷形式一樣，試題內(nèi)容的多少和形式(圖形，表格)等均不限制，縮小了計算機化測驗與紙筆測驗方式的差異。
4.簡便性。為了使軟件有更廣泛的使用范圍，在操作方式方法上必須簡便易行。如我們的軟件操作方式都與windows操作方式相同，不需專業(yè)培訓(xùn)即可掌握。輸入必要信息時，盡量少用鍵盤輸入字符，全部測試過程中，只需要在姓名一欄輸入漢字，其它都是采用option方式由被試自己選擇，當(dāng)然熟悉計算機操作的也可以自己輸入各種信息，答題和修改全部用鼠標(biāo)操作，即使是從來沒有用過計算機的人也極易學(xué)會這種操作方法。簡便性的另一要求是，在操作過程中，應(yīng)該給測試者提供更方便的幫助功能。我們除在系統(tǒng)中設(shè)立有幫助文件外，我們還在軟件適當(dāng)部位顯示測試的有關(guān)信息，如屏幕左上方顯示有測試的名稱、試題數(shù)量、時間限制，屏幕的左下角設(shè)立了未答題數(shù)和剩余時間的顯示欄，以提醒被試控制自己的作答的速度和時間分配，為了方便被試找到未答的題，還提供了快速搜索功能，只要一點搜索健系統(tǒng)就會列出未答題號，雙擊題號，系統(tǒng)就會自動到達(dá)該題所在的頁面。
5.安全性。安全性包括系統(tǒng)運行的穩(wěn)定性，測試內(nèi)容、結(jié)果等的保密性等。人才測評的資料往往成為組織進(jìn)行人事決策的依據(jù)，其結(jié)果對個人和組織都是非常重要的資料。因此，測評系統(tǒng)必須要安全運行，特別是在測評過程中不能出現(xiàn)障礙。否則會影響測評結(jié)果的有效性，還會給組織和個人帶來經(jīng)濟和時間上的損失。作為人才測評的軟件系統(tǒng)。測試內(nèi)容是要反復(fù)使用的，不得公開，測試的結(jié)果也應(yīng)該限定在一定的范圍內(nèi)。為了保證系統(tǒng)的安全性，我們建立了獨特的文件存儲方式，對測評內(nèi)容、評分標(biāo)準(zhǔn)和常模等均進(jìn)行了加密處理，其他人即使得到了文件，也無法解讀。為了控制測試結(jié)果的權(quán)限，我們把測評和結(jié)果的輸出分別作為兩個獨立的系統(tǒng)，測試對象只能在測評站做測試，無法知道自己或他人的測試成績。只有經(jīng)過授權(quán)的管理人員才能打開結(jié)果文件。
6.適應(yīng)性。適應(yīng)性是指測評系統(tǒng)應(yīng)具有較強的適用范圍。一是軟件運行的硬件軟件環(huán)境不能有太高的要求，不需要特殊的設(shè)置和裝置，在普通的PC機上就能運行。二是測評內(nèi)容，能夠滿足不同目的、不同對象測評的需要。由于操作簡便，既可用于大規(guī)模的團(tuán)體統(tǒng)一測試，也可進(jìn)行自由的個別測試，測試內(nèi)容也可由主試或測試者根據(jù)需要選擇，其應(yīng)用范圍很廣�？捎糜谄髽I(yè)組織進(jìn)行人員的招聘與選拔、公務(wù)員錄用考試、人才市場開展的人才評價等。
三、人才測評軟件系統(tǒng)的結(jié)構(gòu)與功能
人才測評軟件系統(tǒng)正在由單一的測試功能向多功能、集成化方向發(fā)展。如果將人才測評軟件作為一大系統(tǒng)的話，則它是以信息管理系統(tǒng)為核心，由測試、題庫管理、數(shù)據(jù)輸入、數(shù)據(jù)傳輸、評定、輸出、查詢、統(tǒng)計分析等子系統(tǒng)組成。其模型如圖1所示。
(一)信息管理系統(tǒng)
就其實質(zhì)來說，測評軟件系統(tǒng)是一個信息獲得、處理、存儲和使用的系統(tǒng)，因此廣義地講，人才測評軟件系統(tǒng)是一個信息管理系統(tǒng)(MIS)。但此處是將人才測評系統(tǒng)作為一個具有一定內(nèi)部結(jié)構(gòu)和獨立功能的系統(tǒng)，因此此處所指的測評軟件的信息管理子系統(tǒng)，是一個接收并存儲其它子系統(tǒng)信息并為其它的子系統(tǒng)的運行提供信息支持的部分，同時人才測評系統(tǒng)也是通過信息管理子系統(tǒng)與其它系統(tǒng)發(fā)生信息交換。簡單地說，它是一個數(shù)據(jù)庫，每個子系統(tǒng)的信息進(jìn)出都要通過這一部分，它的信息內(nèi)容范圍很廣，包括被試的基本信息(報名所提供的)、被試的測試成績、有關(guān)評價標(biāo)準(zhǔn)(如常模)、有關(guān)測評活動的信息如測評公告、測評時間、場所、程序、規(guī)則、主試人員、被試人數(shù)及其分布、有關(guān)個體的評價結(jié)論(測評報告)、團(tuán)體分析報告等等。由于測評信息的重要性，故信息管理系統(tǒng)管理和安全性是非常重要的，它是面向高級主試設(shè)計的，能夠進(jìn)入信息管理系統(tǒng)的都是超級用戶，只有他有權(quán)進(jìn)入此系統(tǒng)并進(jìn)行一定的維護(hù)工作。信息管理系統(tǒng)能夠定期地自行備份。
(二)測試系統(tǒng)
測試子系統(tǒng)的功能主要是提供人機對話試的測評。即將測評的項目(試題、評定要素)等內(nèi)容呈現(xiàn)的計算機屏幕上，由被試或評定人員根據(jù)計算機的提示進(jìn)行答題或操作。傳統(tǒng)的測評軟件基本上就是一個測試系統(tǒng)，而且多數(shù)都只能提供文字和簡單的圖形為刺激材料，且以客觀性試題為主(評分容易)�，F(xiàn)代多媒體技術(shù)的發(fā)展使測評內(nèi)容超越了靜態(tài)的文字和圖形，能夠提供聲音、圖像等綜合性的視聽等感覺刺激材料，仿真模擬也在此基礎(chǔ)上產(chǎn)生。被試的反應(yīng)也從簡單的按鍵選擇A、B、c，發(fā)展到用鼠標(biāo)點擊或用手直接觸摸選擇答案，甚至能夠通過鍵盤或光筆輸入文字(如作文題、論述題、運算題等)，還能夠設(shè)計一定的裝置由被試進(jìn)行模擬操作。測試系統(tǒng)的設(shè)計主要考慮測評對象的特點和測評材料的性質(zhì)，以能夠提供最適宜的人機互動關(guān)系為準(zhǔn)則。
(三)題庫系統(tǒng)
題庫系統(tǒng)的建設(shè)是測評軟件中最重要，也是難度最大的一項工作。此處所說的題庫是一種廣義的題庫概念，泛指測評設(shè)計者精心設(shè)計測評的內(nèi)容，包括試卷、測評量表等測評用的材料，也包括狹義的題庫(Item Bank)，即由若干獨立的試題組成。這些材料是測評軟件中的核心機密，安全性是第一要求。此外，為了便于對這些信息進(jìn)行有效地管理，能夠快速地提取和使用，還應(yīng)該對試卷或試題進(jìn)行編碼，并設(shè)置一定的參數(shù)，如試卷的取材范圍、適用對象、使用的頻率、試題難度、區(qū)分度等參數(shù)等。如果是狹義的題庫則還應(yīng)該有根據(jù)一定條件生成試卷的功能，自適應(yīng)性測評的題庫則還應(yīng)該有試題參數(shù)和能力參數(shù)估計功能、選題功能和終止測試功能。
(四)輸入系統(tǒng)
廣義地說，測試系統(tǒng)也是一個信息輸入系統(tǒng)，但此處所稱的數(shù)據(jù)輸入系統(tǒng)是指除直接的人機對話測試以外對測評對象的基本信息及人工測評信息的輸入系統(tǒng)。特別是現(xiàn)階段測評軟件更需有一個數(shù)據(jù)輸入子系統(tǒng)，從我國目前的實際情況來看，還有很多地方和單位沒有普及計算機，也沒有網(wǎng)絡(luò)化，測評還是以紙筆等手工方式為主，但測評結(jié)果的處理卻需要計算機的幫助。再者，一些操作性的測評結(jié)果也需要通過終端輸入計算機。因此，測評軟件系統(tǒng)應(yīng)該設(shè)計多種數(shù)據(jù)輸入接口。一般來說，鍵盤錄入方式是必備的方式，并根據(jù)測評軟件適應(yīng)的對象范圍設(shè)置其它數(shù)據(jù)輸入方式接口，如OMR、掃描儀、條形碼等。
(五)傳輸采統(tǒng)
當(dāng)測評的范圍擴大后，測評數(shù)據(jù)傳輸?shù)姆绞脚c方法就會反映一個測評系統(tǒng)的效率。不僅社會性、綜合性的測評機構(gòu)要求有及時、快速、安全的數(shù)據(jù)傳輸方式，就是一個企業(yè)內(nèi)部的測評機構(gòu)也需要及時獲得或交換測評的數(shù)據(jù)資料。在傳統(tǒng)的方式之下，往往采用郵遞、派專人護(hù)送等方式，而今則應(yīng)該充分地運用網(wǎng)絡(luò)的優(yōu)勢，通過網(wǎng)絡(luò)來解決這一問題。一般來說，可以通過收發(fā)Email或在網(wǎng)站設(shè)置定時、定期或不定期的發(fā)送頻道。
(六)評定系統(tǒng)
當(dāng)測評系統(tǒng)中有主觀性測試項目或需要作出綜合性評價結(jié)論時，就需要評定系統(tǒng)。其主要功能是對主觀性測試項目進(jìn)行評定，如作文評分等，一些操作性測評的內(nèi)容，也可以將被試操作的錄像傳到評定系統(tǒng)，由專家進(jìn)行評定。在人事管理領(lǐng)域往往需要對測評對象作出綜合性的評價結(jié)論，撰寫測評報告，這需要由測評專家來進(jìn)行，不象客觀性測試可直接進(jìn)行評分和轉(zhuǎn)換。評定系統(tǒng)就是這樣一個工作平臺。
(七)輸出系統(tǒng)
此系統(tǒng)的主要功能是輸出測評的信息和資料。即根據(jù)測評的規(guī)定或用戶的要求打印輸出與測評有關(guān)的資料，如測評分?jǐn)?shù)、測評報告、團(tuán)體分析結(jié)果、測評證書等。
(八)統(tǒng)計分析
統(tǒng)計分析系統(tǒng)主要是使用數(shù)理統(tǒng)計方法對測評的數(shù)據(jù)進(jìn)行匯總處理，如進(jìn)行加權(quán)處理、進(jìn)行模糊統(tǒng)計、回歸分析。通過這種分析得出個體測評的綜合性數(shù)據(jù)，也可以對測評團(tuán)體的數(shù)據(jù)進(jìn)行分析處理，如根據(jù)積累的原始數(shù)據(jù)調(diào)整測驗的常模等，給測驗的編制者提供項目分析的結(jié)果以改進(jìn)測驗編制的質(zhì)量等，測評機構(gòu)還應(yīng)通過統(tǒng)計分析定期向社會或測評委托者公開測評的分析結(jié)果尋如數(shù)據(jù)的分布情況、信度、效度等資料。
(九)查詢承統(tǒng)
此系統(tǒng)主要是針對社會化的測評而設(shè)計的。人們可以在網(wǎng)絡(luò)上查詢有關(guān)資料，如測評活動信息、公告、測評項目介紹、個人資料、測評結(jié)果分析與評價、集體結(jié)果。此系統(tǒng)是開放式的，一般都可放到機構(gòu)的主頁上，個人和機構(gòu)都可以進(jìn)來訪問查詢，為了保證測評者的權(quán)益和個人隱私不被侵犯，需要對訪問者的權(quán)限進(jìn)行限制。
四、人才測評軟件實例
我們開發(fā)的《華瑞人才測評軟件系統(tǒng)》的功能模塊主要有輸入被試信息(報名)、測試內(nèi)容管理、人機對話測試、鍵盤錄入結(jié)果、測評結(jié)果輸出(包括個體和群體)、信息維護(hù)與查詢、幫助功能等功能模塊。下面以簡圖介紹部分功能。
五、人才測評軟件的應(yīng)用情況
我們遵循著開發(fā)、試驗、推廣的模式運行，從1997年至今，已經(jīng)有100多家企事業(yè)單位在使用此套軟件中的一種或多種，例如，上海浦東新區(qū)人事局人才交流中心，上海寶隆集團(tuán)(國企)，上海安普連接器有限公司(外資)，北京馬斯康電子有限公司(外資)，深圳平安保險公司總部，中外合資長飛光纖光纜有限公司，紅桃K集團(tuán)，珠海市人力資源管理中心，馬應(yīng)龍集團(tuán)等。湖北省公務(wù)員錄用考試一直使用此套軟件進(jìn)行素質(zhì)測評。用戶都反映此套軟件操作簡單方便，結(jié)果有效性高，網(wǎng)絡(luò)化的方式測評效率極高，測評現(xiàn)場即可看到測評的結(jié)果，是一套非常實用的人才測評軟件，此套人才測評軟件也因獲得上海市發(fā)明協(xié)會授予的“創(chuàng)造發(fā)明獎”。
更多相關(guān)